Жизнь: руководство по эксплуатации. Невидимые законы реальности. Дмитрий Нортман
ожидал исследователь, закономерно возникает вопрос: можно ли доверять таким итогам?
Чтобы оградить свои исследования от этого эффекта, ученые стараются использовать методы обычного и двойного слепого контроля:
• обычный вариант: испытуемым ничего не известно о планируемом воздействии в ходе эксперимента;
• двойной слепой контроль: и сам экспериментатор ничего не знает о своем возможном воздействии на испытуемых. Исследования кодируются третьим участником эксперимента, и пока процесс сбора данных не завершится, испытатель не получит доступ к коду.
С другой стороны, научное знание, полученное посредством экспериментов, требует обязательного подтверждения другими независимыми учеными-экспериментаторами. Так, в начале 2000-х «Амген» – компания, работающая в сфере биотехнологий, – решила повторить некоторые важные исследования. Она вкладывала миллионы долларов в исследования онкобиологии, основываясь на прежних экспериментах, так как если эффекты, обнаруженные в первичных исследованиях, были незыблемы, то и последующий этап разработки препаратов для лечения онкологических заболеваний будет базироваться на твердом основании. Итог был шокирующим. За 10 лет работы компания сумела повторить только 6 исследований из 53.
За несколько месяцев до того другая фармацевтическая компания – «Байер» – опубликовала схожий анализ. В результате началась большая работа по определению того, сколько ключевых исследований поддается воспроизводимости. Попытка воспроизвести 5 исследований онкобиологии оказалась успешной только в двух случаях. Эпидемиолог Джон Иоаннидис из Стэнфордского университета на эту тему высказался так: «Общая картина такова, что повторяемость результатов стала проблемой»[10].
Что касается гуманитарных наук – международная группа из 270 ученых решила повторить 100 исследований, опубликованных в 2008 году в трех ведущих журналах по психологии. Оказалось, что они способны воспроизвести меньше половины[11].
И, учитывая вышесказанное, вот о чем стоит задуматься: что, если данные, полученные в результате множества экспериментов, преимущественно отражают воздействие, оказываемое персоной экспериментатора? Причем учитывается не только прямое активное действие, но и психическое влияние. Эффект работает как для ожиданий исследователя-одиночки, так и для целой группы – а значит, в список можно вносить:
• разнообразные модели реальности, в которые верят или которые доказывали сообщества профессионалов;
• системы мировоззрения, построенные на научном мышлении – к этому имеют отношение группы авторитетных ученых.
Все это формирует картину ожиданий в той или иной области, а значит, вполне способно повлиять и на результаты экспериментов.
Феномен ожиданий экспериментатора обладает вполне реальной силой. Возьмем известный криминологам «эффект ярлыка»: он описывает, как наше внутреннее восприятие себя или ожидание
Ioannidis J. P. A. Why Most Published Research Findings Are False. PLOS Medicine, № 2 (8), 2005.
Estimating the reproducibility of psychological science. Open Science Collaboration. Science.Vol. 349, Issue 6251, 2015.