Чтобы ни врач, ни пациент не исказили результат, исследование делают «слепым» – коробочку с лекарством для пациентов X и Y определяют жеребьевкой. Только после того, как все наблюдения завершены, исследователи расшифровывают, какой пациент принимал настоящее лекарство, а какой плацебо.
Вы можете очень просто увидеть эффект «ослепления» – с пепси и кока-колой. Кока-кола потому так популярна, что большинство людей верят, что она им больше нравится на вкус – они уверены, что чувствуют разницу. Возьмите десять бумажных стаканчиков, напишите внизу номер. В стаканчиках с четными номерами пусть будет кока-кола, с нечетными – пепси. Перемешайте стаканчики, чтобы никто не знал, что где находится. А затем проверьте, что и кому больше понравится и много ли людей угадает марку. Кстати, будет еще интереснее, если налить пепси в бутылку из-под кока-колы и разлить ее у всех на глазах. Думаю, вы уже заметили, как много усилий нужно приложить, чтобы наши ожидания не оказали существенного влияния на результат эксперимента.
Ценность результатов исследования для отдельной жизни и отдельных заболеваний зависит от того, кого мы исследуем и как сформирована группа. Когда вы читаете о большом прорыве в лечении болезни Альцгеймера, то поищите, не написано ли там мелким шрифтом, на ком тестировался препарат: на людях, мышах или вообще на клетках в пробирке. В психологии большинство экспериментов проводится на студентах, которые иначе просто болтаются без дела. Тот факт, что их поведение нерепрезентативно для общества в целом, часто забывают упомянуть.
При телефонных опросах номера случайным образом выбирают из телефонной книги. Если вашего номера там нет, то вам не позвонят. Если исследование не включает какие-то группы населения, это искажает результат. Опрос трех подруг о работе буфета менее убедителен, чем исследование при участии многих тысяч человек. Поэтому следующий критерий – это величина опрошенной группы.
Обратите внимание на число участников исследования: чем больше людей, тем больше уверенности в верности результата. Почти все чудодейственные средства ссылаются на очень впечатляющие и, как правило, плохо задокументированные случаи. Как в любых хороших историях, в них все приукрашено и преувеличено. Предположим, вы хотите выяснить, помогает ли витамин С не заболеть простудой. Вы принимаете витамин С в течение недели и не заболеваете. Что это доказывает? Ничего.
