Assessment-центр
методология HR BP по подписке — ответы на вопросы Ленты
Методология · Assessment-центр

Ответы на вопросы команды Ленты по методологии оценки

Собрали подробные ответы на всё, что было задано по итогам встречи — от структуры шкалы до происхождения методологии и того, как выглядит вывод по команде. Нажмите на вопрос, чтобы раскрыть полный ответ.

Прежде чем перейти к вопросам — на чём в целом держится метод
Метрики бизнеса Поведение в модельной ситуации Скрытые установки Интеграция в отчёт

Чем больше независимых источников данных о человеке сходятся в одном выводе, тем выше доверие к этому выводу. Все шесть ответов ниже так или иначе возвращаются к этому принципу.

1
Можете дать описание своих компетенций и индикаторов? В отчёте видны значения «−1» и «+1» — это все возможные точки, или есть градация между ними?

Компетенциями и индикаторами — да, готовы поделиться полностью, каталог ниже. Если речь о том, чтобы вместо нашей модели использовать компетенции и индикаторы Ленты — технически можем это рассмотреть, но не с гарантией «один в один». Наблюдение построено под конкретный формат — мы «даём импульс» через определённые ситуации (мини-стратсессию) и смотрим, какая модель поведения на него отзывается. Не любую компетенцию корректно поймать в этом формате. Поэтому по компетенциям Ленты нам нужно время: разобрать, что именно в них можно продиагностировать через наш инструмент наблюдения, а что потребует адаптации формата или дополнения другими способами сбора данных.

Полный каталог модели: 3 блока · 15 компетенций · 45 индикаторов

Раскройте блок, затем компетенцию внутри него — увидите её описание и оба полюса каждого входящего в неё индикатора: что означает «−1» и что означает «+1».

Как устроена шкала «−1 / +1»

У каждого поведенческого индикатора есть два описанных полюса — словесное описание минимального (−1) и максимального (+1) проявления. Промежуточных точек с отдельным текстовым описанием нет — это не 5-балльная шкала с подписанными делениями. При этом итоговое значение непрерывное: то, где именно на отрезке от −1 до +1 окажется компетенция, определяется тем, как часто и в скольких из наблюдаемых ситуаций проявился тот или иной полюс — подробный механизм в вопросе 2.

Мы оцениваем не изолированную силу отдельного индикатора, а его связки с другими: например, высокая влиятельность без аналитичности и методичности — рискованный профиль для управленца. Поэтому индикаторы группируются в компетенции, а компетенции — в три блока, и читать их правильно в связке, а не по одному.

2
Как получаются дробные значения по компетенциям в индивидуальных и командных отчётах? Это связано с промежуточными значениями и калибровкой наблюдателей?

Мы наблюдаем за человеком не в одной ситуации, а в четырёх последовательных «окнах», каждое из которых по-своему помещает его в неопределённость и даёт конкретный импульс к действию:

Четыре окна наблюдения

1. Блок рефлексии. Участникам показывают рефлексирующий мультфильм и смотрят, через какую призму они на него смотрят — это задаёт первый срез мышления и установок ещё до основной задачи.
2. Индивидуальная работа с гипотезами. Смотрим, какие гипотезы человек выдвигает самостоятельно, как быстро генерирует, насколько они разнообразны.
3. Работа в парах / тройках. Команду заранее делим на малые группы по 2–3 человека — не случайным образом, а по принципу «похожих ролей»: участников с выраженным лидерским поведением объединяем друг с другом, а более ведомых — тоже друг с другом. Так более сильный партнёр не «прикрывает» более слабого, и группе приходится самой распределять роли и вытягивать задачу. Наблюдаем поведение именно в малой группе — здесь модели поведения раскрываются иначе, чем один на один с задачей.
4. Работа в общей группе. Финальный срез — поведение в присутствии всей команды. Для больших команд группу делят на 2–4 подгруппы, в зависимости от численности.

Как из этого получается число

Представьте, что через человека в каждом из четырёх окон «пропускают ток»: если модель поведения проявляется — «загорается» индикатор, причём либо в положительную сторону (например, доминирование), либо, реже, в отрицательную (например, человека явно просят проявить инициативу — а он, наоборот, уходит в сторону). Если модель поведения устойчиво загорается во всех четырёх окнах — итоговое значение стремится к максимуму (±1). Если она проявилась только в одном окне из четырёх — значение получается дробным (например, ±0,25), потому что компетенция используется, но нечасто и не универсально.

Отрицательные проявления фиксируются заметно реже положительных — это не артефакт подсчёта, а особенность самого метода: ситуации специально сконструированы так, чтобы «подсвечивать» сильные стороны участников, а не провоцировать слабые. Поэтому по умолчанию мы скорее «плюсуем» ту или иную модель поведения, либо не фиксируем её вовсе — чистый минус встречается реже.

Разный вес окон наблюдения

Все четыре окна дают данные для итогового числа, но не в равной пропорции. У человека объективно меньше возможностей проявить индикатор в блоке рефлексии, чем в работе внутри мини-группы или в общей группе — там больше живых, неразмеченных ситуаций для взаимодействия, споров, распределения ролей, а значит и больше шансов, что модель поведения «засветится». Поэтому окна с более высокой плотностью поведенческих проявлений — прежде всего работа в парах/тройках и в общей группе — весят в итоговом расчёте больше, чем блок рефлексии, где по формату задания индикаторов физически меньше.

Роль калибровки наблюдателей

Отдельно от механики подсчёта — за каждым участником наблюдают несколько ассессоров одновременно, и оценка перекрёстная: один и тот же блок отсматривают минимум два эксперта. Если их фиксации расходятся, расхождение разбирается и калибруется коллегиально. Это не источник дробных значений само по себе, а механизм, который снижает субъективность и случайные ошибки одного наблюдателя — то есть влияет на точность итогового числа, а не на саму его дробность.

3
Как понять значение компетенции вроде «+0,25» — это много или мало? На диаграммах видно жёлтый, зелёный, оранжевый цвета — есть ли единая шкала?

Да, шкала единая для всех компетенций и во всех отчётах — от −1 (максимально отрицательное проявление) до +1 (максимально положительное), с 0 в качестве нейтральной точки. 0 — это ситуация, когда компетенция проявлялась и в плюс, и в минус в сопоставимой мере — то есть положительные и отрицательные проявления взаимно уравновесили друг друга и в сумме сошлись в точке 0.

−1 0 +1
+0,25 — здесь

Пороги цветовой шкалы

ДиапазонЦветЧто означает
+0,60 … +1,00зелёныйсильное, устойчивое положительное проявление — видно практически в каждой из наблюдаемых ситуаций
0 … +0,59жёлтыйот нейтрального сигнала (0) до заметного, но ещё не системного положительного проявления
−0,01 … −1,00красныйотрицательное проявление зафиксировано хотя бы в одной из наблюдаемых ситуаций — чем ближе к −1, тем оно устойчивее
Итог по «+0,25»

Это жёлтая зона: компетенция проявляется в положительную сторону, но не системно — не во всех наблюдаемых ситуациях, а точечно. Это не «слабое место» в смысле проблемы, но и не сильная, устойчивая сторона, на которую можно опираться как на надёжную. Именно поэтому такие значения в отчётах не приравниваются к нулю и не приравниваются к «зелёной» зоне — они читаются отдельно.

4
Правильно понимаем, что в индивидуальном отчёте по компетенциям используется «начинка» из какого-то опросника TalentQ?

Отчёты формирует наша внутренняя AI-модель — но она не «читает» ответы кандидата на опросник TalentQ и не пересказывает его результат. Модель опирается на два слоя:

Слой 1 — международная база терминов

В основе лежат международно признанные определения моделей поведения — исторически, в том числе, восходящие к аналитическому отчёту TalentQ. Это была отправная точка много лет назад: терминология, структура компетенций, логика «полюс-полюс» в описании индикаторов.

Слой 2 — собственная методология поверх неё

Поверх этой базы больше 5 лет выстраивалась наша собственная методология — она развивалась на практике, на реальных ассессментах, и именно она сейчас является определяющей: она задаёт, какие модели поведения мы вообще фиксируем, как их группируем в компетенции и блоки, как интерпретируем связки между ними и что подсвечиваем в выводах. AI-модель, которая пишет отчёты, обучена и настроена именно на этой внутренней методологической базе — она задаёт правила интерпретации, на основе которых модель формулирует текст.

5
Как формируется командный отчёт — это аналитика на основе ИИ, или есть методика для интерпретации? Она тоже из TalentQ, или это своя разработка? Есть ли цифры прогностической валидности?

Как формируется отчёт

ИИ не формирует отчёт «из воздуха» — он всегда опирается на заданные правила интерпретации, даже если задать вопрос напрямую в чат-модели общего назначения. У нас эти правила — та же собственная методология, что описана в вопросе 4. Командный отчёт строится по той же логике, что и индивидуальный: данные всех участников агрегируются, и к ним применяется наш слой интерпретации — а не свободная генерация текста моделью.

Особенность применения к вашей компании

Наша методология в её нынешнем виде откалибрована на профиле быстрорастущих компаний — соответственно, весовые акценты в ней сильнее в сторону компетенций, важных для роста и экспансии (влиятельность, готовность рисковать, радикализм и т.п.). Лента — компания-лидер рынка, в каком-то смысле монополист в своей категории, с принципиально иной бизнес-логикой: устойчивость, масштаб, операционная надёжность важнее агрессивного роста. Для такого профиля, вероятнее всего, важнее будут другие акценты — например, нормативность и предсказуемость исполнения. Это значит, что матрицу интерпретации для вашей компании мы пересоберём под ваш контекст — это отдельная методологическая работа, а не мгновенная переустановка галочки.

Это TalentQ или своя разработка?

Своя — в том смысле, что интерпретационный слой, который решает, что означает то или иное сочетание компетенций и как это подать как вывод, разработан нами. Но мы избегаем громких формулировок вроде «уникальная авторская методология», потому что это подразумевает определённый уровень научной защиты и сертификации, через который мы не проходили.

Прогностическая валидность — максимально честно

У нас нет формального научного исследования корреляции между данными отчётов и последующей эффективностью сотрудников или команд — то есть измеренной статистической прогностической валидности с сертификацией методики. Мы этим целенаправленно не занимались: это отдельный трек научной валидации, требующий строгой доказательной базы, а наш инструмент исторически развивался как практический, прикладной.

Что у нас есть — устойчивое качественное подтверждение практикой: за 5+ лет и сотни проведённых оценок руководители и собственники бизнеса, увидев отчёт по своей команде, стабильно и без подсказки говорят, что это точно описывает реальную картину. Это не замена статистической валидности — это другой тип доказательства, накопленный на большом количестве кейсов, а не измеренный формальным экспериментом.

6
Можно ли посмотреть пример выводов по команде? Важно, чтобы эти выводы могли однозначно интерпретировать наши руководители от бизнеса.

Как выглядит вывод на практике — реальный фрагмент

Пример вывода по компетенции «Аналитичность» для одного из отделов демонстрационной команды — именно в таком формате «уровень → задачи → метрики» мы предлагаем показывать выводы:

Аналитичность (средний уровень)
Что это значит для задач

Команда способна находить и использовать информацию, однако не всегда трансформирует данные в глубокие аналитические выводы. Анализ чаще носит описательный характер, без системного сопоставления альтернатив и расчёта последствий решений.

Как это отражается на метриках

Снижение конверсии из-за неэффективных решений по ассортименту и продвижению. Рост риска упущенной выручки. Снижение маржинальности вследствие не до конца обоснованных ценовых решений.

Почему этот пример может не подойти для вашей команды

Этот демо-отчёт откалиброван под другой профиль компании — быстрорастущий бизнес на маркетплейсах, другая оргструктура, другой язык метрик. Чтобы выводы были однозначно понятны именно вашим бизнес-руководителям, нужно:

  • прогнать модель компетенций и выводов на условных данных, приближенных к структуре и языку Ленты — чтобы показать то, как выводы будут выглядеть именно для вас;
  • откалибровать уровень детализации и «угол» практического применения выводов под управленческую культуру Ленты.
Предлагаемый следующий шаг

Предлагаем начать с малого пилота: мы можем смоделировать выводы конкретно по тем компетенциям и индикаторам, которые вы хотите проверить в команде ваших руководителей. Нам важно, чтобы вы увидели, подходит ли формат и уровень детализации, прежде чем масштабировать на всю оценку.

Assessment-центр — методология HR BP по подписке. Подготовлено по итогам вопросов команды Ленты после первой встречи.