Искусство распознавать чушь. Как не дать ввести себя в заблуждение и принимать правильные решения - стр. 14
Роберт Ходжсон – бывший профессор статистики Университета имени Гумбольдта, а также владелец Fieldbrook Winery на северо-западе Калифорнии, основанной в 1976 году. Это небольшое винодельческое хозяйство, продающее всего около 1500 ящиков вина в год, при этом обладающее рядом винодельческих наград. А в мире вин награды приносят не только престиж, но и значительно влияют на репутацию бренда, увеличивая его продажи: вина с бронзовой, серебряной или золотой наклеечкой продаются в масштабах, до 7 раз превышающих продажи тех же вин без наклейки[34].
Ходжсон, заинтересовавшись тем, как его вина получали золотые медали на одних конкурсах, притом что катастрофически проваливались на других, решил получить данные соревнований. Проанализировав их, он пришел к выводу, что медали, кажется, зачастую присуждались случайным образом и у каждого вина был шанс в 9 % выиграть золотую медаль в любом конкурсе.
В одном из экспериментов Ходжсон предложил сомелье попробовать вино из трех бокалов с закрытыми глазами[35]. Это было обязательным условием: так эксперты не смогли бы оценить вино по шкале 36 уникальных оттенков или по марке. Затем они оценили каждый экземпляр по стандартной 100-балльной шкале: хорошее (80–84 балла, серьезное, хорошо сделанное вино), очень хорошее (85–89 баллов, вино с особыми свойствами), выдающееся (90–94 балла, вино с превосходным характером и стилем) и самая высокая оценка – классика (95–100 баллов, великое вино).
В среднем оценки судей отличались друг от друга на 4 балла (плюс-минус). Но вот в чем дело: все три бокала были наполнены из одной бутылки. Тем не менее вино, оцененное на 92 балла в ходе первого испытания, та же эксперт оценивала на 88 или 96 в последующих. Некоторые из судей справились еще хуже. Только один из десяти экспертов постоянно оценивал одно и то же вино с разбросом в два балла. Впоследствии Ходжсон выяснил: судьи конкурса вин на Ярмарке штата Калифорния (один из самых старых и престижных винных конкурсов Северной Америки), чьи оценки казались наиболее последовательными в каждый отдельно выбранный год, показывали далеко не лучшие результаты в другие годы. Это позволяет предположить, что «последовательность» оценок в любой данный год не более чем случайность. Более того: меньше чем 10 % судей оказались способны повторить свою же оценку в рамках вин одной категории. Другие 10 % присуждали золотую медаль винам, которым до этого присудили бронзу.