Одна из наиболее интересных оценок градуировки известна как «индекс неожиданности». Индекс используется для оценок промежутков, точность которых известна. Например, представьте, что вы почувствовали 90%- ную уверенность в том, что правильный ответ на вопрос п. 12 Анкеты находится где- то между дюймом и милей (см. п. 126). Поскольку правильный ответ больше мили, этот ответ должен быть засчитан как неожиданность. Индекс неожиданности — это простое процентное выражение оценок, лежащих за границей уверенности.
В фундаментальном обзоре исследований градуирования Лихтенштейн, Фишхофф и Филлипс (1982) оценивали некоторые исследования, в которых респондентов просили указать интервалы, в которых они уверены на 98% (т.е. интервалы, которые с вероятностью 98% включали бы в себя верный ответ). В каждом исследовании ожидаемый индекс неожиданности составлял 2%. В среднем по данным всех экспериментов (всего около 15 000 оценок) индекс неожиданности составил около 32%. Другими словами, когда респонденты были уверены на 98%, что правильный ответ в названном ими промежутке, они оказывались правы на 68%. Еще раз переоценка подтвердила правило, а не исключение.
Склонны ли вы к переоценке? Эдуард Руссо и Поль Шумахер в 1989 году придумали легкий тест для самопроверки (см. рис. 19.3). Несмотря на то что исчерпывающая оценка градуировки (278:) требует сотен ответов, этот тест дает вам общее впечатление о том, каков ваш индекс неожиданности при ответе на вопросы из области общего знания при одном уровне уверенности. Руссо и Шумахер предложили этот тест более чем 1000 человек и обнаружили, что менее 1% респондентов смогли верно ответить на 9 или все 10 вопросов. Большинство людей неверно отвечали на 4- 7 вопросов (индекс неожиданности 40- 70%), опять- таки подтвердив свойство переоценки.
Тест для самопроверки переоценки себя
Для каждого вопроса отметьте верхнюю и нижнюю границы, в которых (вы уверены на 90%) находится этот ответ. Вы не должны ни переоценить, ни недооценить свою правоту. Если вы успешно справитесь с заданием, у вас будет 10% непопадания, т.е. одна ошибка.
Уверенность на 90%
Нижняя
Верхняя
1. Мартин Лютер Кинг умер в возрасте
2. Длина Нила
3. Количество стран — членов OPEC
4. Количество книг в Ветхом Завете
5. Диаметр Луны в милях
6. Вес Боинга 747в фунтах
7. Год рождения Вольфганга Амадея Моцарта
8. Период беременности (в днях) азиатского слона
9. Прямое расстояние от Лондона до Токио
10. Самая большая глубина океана (в футах)
Ответы: (1) 39 лет; (2) 1187 миль; (3) 13 стран; (4) 39 книг; (5) 2160 миль; (6) 390 000 фунтов; (7) 1756; (8) 645дней; (9) 5 959 миль; (10) 36 198 футов.
Рисунок 19.3
Этот тест может навести вас на мысль о том, не переоцениваете ли вы свои знания (перепечатано с разрешения Руссо и Шумахера, 1989).
Корреляция между уверенностью и точностью
Переоценка не является чем- то неизменным, оценку вполне возможно привести в согласие с точностью. Например, (279:) представьте себе человека, который был на 50% точен, будучи на 70% уверен, на 60% точен, будучи на 80% уверен, и т.д.
В таком случае возникает вопрос: связана ли уверенность с точностью — независимо от наличия или отсутствия переоценки? Если уверенность возрастает, когда возрастает точность, то точность может быть представлена как функция уверенности. Если нет, то тогда уверенность не может быть индикатором точности.
Было проведено много исследований с целью разобраться в этом вопросе, и их результаты зачастую показывали очень незначительную связь между уверенностью и точностью. Чтобы проиллюстрировать это, обратимся к следующим двум проблемам из области истории:
Проблема 1. Правительство страны, расположенной невдалеке от супердержавы А, после обсуждения неких перемен в своей партийной системе начало расширять торговые отношения с супердержавой Б. Чтобы остановить эти перемены в правительстве, супердержава А посылает свои войска в эту страну и путем военного вмешательства восстанавливает status quo. Какая держава скрывается под буквой А — США или СССР? Насколько Вы уверены в своем ответе?
Проблема 2.В 1960- х годах супердержава А организовала неожиданное нападение на небольшую страну у своих границ с намерением свергнуть правящий режим. Вторжение провалилось, и большинство оккупантов были убиты или взяты в плен. Что за страна супердержава А?Насколько вы теперь уверены в своем ответе?
Версии этих проблем были предложены в п.п. 9 и 10 Анкеты. Если вы выбрали СССР в первом случае и США — во втором, вы были правы. Первая проблема описывает вторжение советских войск в Чехословакию в 1968 году, вторая — американскую военную операцию на Кубе. Большинство людей, по крайней мере, на один вопрос отвечают неверно, независимо от того, насколько они уверены в ответе.
В ноябре 1984 года в журнале Psychology Today Филипп Зимбардо и Скотт Плаус опубликовали результаты опроса читателей, содержащего как эти две проблемы, так и описания других конфликтов. Опросный лист включал в себя 10 описаний событий или утверждений политического характера, касавшихся (280:) советского и американского милитаризма, но в каждом описании обозначения США и СССР менялись. Задачей читателей было определить, какая страна скрывается под обозначением «супердержава А» и определить по 9- балльной шкале свою уверенность в каждом ответе.
Основываясь на ответах 3500 человек, мы смогли сделать два заключения. Во- первых, респонденты путали американские и советские милитаристские акции. Несмотря на то что просто подбрасывая монету, можно было бы угадать в среднем 5 ответов из 10, среднее количество верных ответов, данных читателями Psychology Today — людьми образованными — было 4,9. Только 54% респондентов определили, что супердержава А в проблеме 1 — это СССР во время вторжения в Чехословакию, и 25% перепутали СССР и США, отвечая на вопрос проблемы 2. Эти результаты говорят о том, что американцы осуждали политику СССР не потому, что она отличалась от политики США, а потому, что она была советской.
Во- вторых, мы обнаружили, что уверенность людей не имела ничего общего с их правотой (в среднем связь между ними не превышала 8%, что очень близко к нулю). В целом, люди, ответившие правильно на 8—10 вопросов, были не более уверены в себе, чем менее удачливые респонденты, а более уверенные в себе показывали такие же или более низкие результаты.
Это не значит, что оценки уверенности определяются случайно; респонденты, действительно очень уверенные в своих ответах, кое в чем отличаются от остальных. Две трети уверенных респондентов (уверенных на 8- 9 баллов по 9- балльной шкале) были мужчинами, несмотря на то что и мужчины, и женщины приняли одинаково активное участие в опросе и большинство из них были старше 30 лет. Они в два раза чаще неуверенных респондентов хотели укрепления обороны страны и в два раза чаще были уверены, что СССР нельзя доверять. И средний их результат был 5,1 — чуть больше, чем можно получить, подбрасывая монету. Итак, очень уверенные в себе респонденты не могли отличить действия СССР от действий США, но они были предвзяты в оценке и выступали за укрепление обороны.
Как было отмечено выше, в результате многих других опытов обнаружена незначительная связь между уверенностью в ответах и их точностью или вовсе не было обнаружено такой связи (Пайз и Снайзек, 1991; Райбек, 1967; Снайзек и Хенри, 1989; (281:) 1990; Снайзек, Пайз и Свицер, 1990). Эта общая тенденция особенно ярко проявилась в исследовании свидетельских показаний. Более того, эти исследования показали, что уверенность свидетелей в своих показаниях имела самое незначительное отношение к тому, насколько точны были эти показания на самом деле (Браун, Деффенбэйкер и Стеджилл, 1977; Клиффорд и Скотт, 1978; Луэпп, Уиллз и Остром, 1978). При обзоре 43 отдельных исследований связи между точностью и оценкой в свидетельских показаниях Кеннет Деффенбэйкер в 1980 году обнаружил, что в 2/3 «судебных» исследований (например, исследований, в которых респонденты должны были оценивать приговоры) связь между оценкой и точностью не была ярко выраженной. Открытия вроде этого заставили Элизабет Лофтус, автора Eyewitness Testimony ,заключить: «Нельзя воспринимать уверенность как абсолютную гарантию чего- либо» (1979, с. 101).