Когда нужно действовать быстро

Эффект «трудно—легко»

На трудных заданиях уверенность в правильности ответов нередко превышает фактическую точность, а на лёгких отстаёт от неё. Этот рисунок называют эффектом трудности и лёгкости. Однако он не всегда означает, что сложность сама по себе вызывает психологическую ошибку.

Hard–easy effect

Как это выглядит

Представим команду технической поддержки, которая проходит два учебных теста. В первом собраны знакомые обращения, во втором редкие поломки. После каждого ответа сотрудники указывают уверенность. В лёгком тесте правильных ответов оказывается больше, чем можно ожидать по их оценкам, в сложном меньше. Руководитель решает: «Чем меньше знают, тем самоувереннее». Но тесты различаются не только сложностью: второй специально составлен из исключений, а вывод опирается на небольшое число ответов. По такому сравнению нельзя приписывать сотрудникам устойчивую черту.

Механика

Иногда оценки действительно недостаточно меняются вслед за точностью. Но похожий рисунок создаёт и способ измерения. У шкалы уверенности есть границы: при почти безошибочном результате завысить точность уже трудно, а недооценить её легко. Есть и математическая зависимость: показатель «уверенность минус точность» уже содержит точность, с которой его затем сопоставляют. Наконец, если разделить задания по случайно полученной успешности, в крайние группы попадут и случайные отклонения; при повторном измерении они склонны быть менее крайними. Это регрессия к среднему, а не обязательное изменение мышления.

Когда стоит насторожиться

Не путайте абсолютную точность и место среди других. На трудной задаче человек может завышать ожидаемый балл, но считать себя хуже остальных. Особенно осторожно читайте выводы, если лёгкие и трудные вопросы отобраны после получения тех же результатов, по которым вычисляют ошибку уверенности.

Что помогает

Для собственной проверки сохраняйте оценки до раскрытия ответа и сравнивайте их с результатами на серии сопоставимых заданий. Сложность желательно определять на независимых данных. Проверяйте отбор вопросов, объём наблюдений и границы шкалы, прежде чем объяснять различия самоуверенностью. Это требования к интерпретации, а не тренировка с доказанным лечебным эффектом.

Откуда взялось понятие

В количественном обзоре заданий общего знания с двумя вариантами ответа эффект почти исчезал после контроля границ шкалы и математической зависимости. Этот вывод ограничен исследованными задачами: он не отменяет все формы избыточной уверенности, но делает универсальное психологическое объяснение ненадёжным.