Смерть экспертизы
Шрифт:
На что мой дядя, подобно многим людям, которые боятся летать, возразил типичной фразой: «Да, но что если пришло время пилота?»
Ни один из нас не может быть идеально рациональным человеком, большинство людей боятся ситуаций, когда они теряют контроль. Мой дядя был необразованным человеком, родившимся в деревне в начале двадцатого века. Я – образованный человек двадцать первого века, хорошо осведомленный в статистике и истории, но при этом чувствую себя ничем не лучше, когда во время ночного рейса сижу, вжавшись в кресло, пока самолет потряхивает на подлете к Провиденсу. В такие моменты я пытаюсь думать о тысячах похожих случаев приземления самолетов по всему миру и о невероятно малом шансе, что наш рейс окажется в числе невезучих. Но обычно у меня это плохо получается: я начисто забываю о всех тех безопасно осуществленных рейсах из Ванкувера в Йоханнесбург, когда сижу, вцепившись руками в подлокотники, в то время как наш самолет скользит над крышами домов Род-Айленда.
Ныне покойный
«Я пытаюсь объяснить степень риска. Потому что недавно я заметил, как мало людей осознают степень этого риска. Я вижу, что люди хранят дома оружие, ездят в машине не пристегнутые, едят французскую кухню, забивающую сосуды, и курят сигареты. И ничуть не переживают. Вместо этого их пугает СПИД. Это какое-то безумие.
– Эллен, ты боялась когда-нибудь погибнуть в автокатастрофе?
– Нет, никогда.
– Боялась, что тебя убьют?
– Нет.
– Знаешь, существует гораздо большая вероятность погибнуть в автокатастрофе или быть убитой незнакомцем, чем заразиться СПИДом.
– Спасибо огромное, – отвечает Эллен. Она раздражена. – Я так рада, что позвонила тебе. Ты действительно умеешь успокоить, Майкл {14} .
14
Michael Crichton, “Panic in the Sheets”, Playboy, декабрь 1991, копия на MichaelCrichton.com
Десять лет спустя о СПИДе стало известно больше, и истерия пошла на спад. Однако в более поздние годы новые угрозы здоровью, такие как вирус Эбола, атипичная пневмония и другие редкие недуги стали вызывать похожие реакции у тех американцев, кто больше беспокоится из-за экзотической болезни, чем из-за того, что они болтают по мобильному за рулем автомобиля, после того как позволили себе немного выпить в местном пабе.
Обратите внимание, что подобная предвзятость почти никогда не работает в обратном направлении. Лишь немногие из нас уверены в том, что являются исключением в хорошем смысле. Мы покупаем лотерейный билет, позволяем себе немного пофантазировать, а потом кладем его в карман и забываем о нем. Никто из нас не отправляется к автодилеру или риелтору с выпавшим назавтра номером лотереи.
Иррациональный страх встречается чаще иррационального оптимизма, потому что склонность подтверждать свою точку зрения – это механизм выживания. Хорошие вещи приходят и уходят, а смерть остается. Ваш мозг не особо беспокоится из-за всех тех людей, которые успешно долетели куда-то или благополучно пережили интрижку на одну ночь: они не вы. Ваш интеллект, работающий с ограниченной или неверной информацией, делает свою работу, пытаясь минимизировать любой риск для вашей жизни, даже самый маленький. Когда мы преодолеваем склонность к подтверждению своей точки зрения, мы пытаемся исправить базовую функцию (причем это именно функция, а не ошибка) человеческого мышления.
Вне зависимости от того, является ли проблема вопросом смертельного риска или одной из будничных дилемм, склонность искать подтверждение уже сложившемуся мнению никуда не исчезает, потому что людям нужно полагаться на то, что они уже знают. Они не могут действовать так, как будто их ум – это чистый лист бумаги. Память работает иначе: вряд ли было бы эффективно начинать каждое утро с того, чтобы пытаться выяснить любую вещь с нуля.
Ученые и исследователи борются со склонностью к подтверждению своей точки зрения, как с профессиональной помехой. Им тоже приходится выдвигать гипотезы, чтобы осуществить эксперименты или объяснить сложный вопрос. А это означает, что они уже накопили определенный опыт. И они строят предположения и прибегают к интуиции, как и все мы. Иначе они потеряют много времени, если будут начинать каждое свое исследование с концепции, что никто ничего не знает, и до этого дня ничего не происходило {15} . «Сделать, а потом разобраться» – это распространенная проблема, когда приступаешь к какому-то подробному исследованию: в конце концов, как мы узнаем, что ищем, если мы еще не обнаружили этого? {16}
15
Существует целая область математической статистики, т. н. «байесов анализ», названный по имени английского математика XVIII столетия, посвященная именно этой проблеме.
16
Ученые, занимающиеся общественными науками, знакомы с этой проблемой, как никто другой. См. Charles O. Jones, “Doing before Knowing: Concept Development in Political Research,” Amreican Journal of Political Science 18(1),
Исследователи учатся распознавать эту проблему в самом начале своего обучения, и у них не всегда получается справиться с ней. Склонность к подтверждению своей точки зрения способна ввести в заблуждение даже самых опытных экспертов. Случается, что врачи изначально настраиваются на определенный диагноз и ищут подтверждающие его симптомы, которые должны у пациента, по их мнению, быть, игнорируя реально присутствующие признаки других болезней и травм. (Врач-диагност доктор Хаус из одноименного телесериала говорит своим студентам-медикам: «Это не может быть волчанка». И, конечно же, далее следует эпизод, где самому самонадеянному врачу в мире приходится смириться со своей неспособностью поставить правильный диагноз тогда, когда это действительно оказывается волчанка.) Даже несмотря на то, что каждому исследователю говорят о том, что «отрицательный результат – это тоже результат», на самом деле никому не хочется обнаружить в итоге, что его изначальные предположения были неверны, и все усилия пошли прахом.
Именно так, например, произошло с изучением отношения общественности к однополым бракам. Студент-аспирант заявил, что он обнаружил статистически неопровержимое доказательство того, что, когда противники однополых браков беседовали на эту тему с тем, кто действительно был геем, они чаще всего меняли свою точку зрения. Его результаты были письменно заверены старшим коллегой из Колумбийского университета, который был соавтором данного исследования. Это стало удивительным открытием, которое было равносильно доказательству того, что разумных людей можно убедить отказаться от своих гомофобных взглядов.
Единственная проблема заключалась в том, что честолюбивый молодой исследователь исказил данные. Тех обсуждений, которые он, по его словам, анализировал, никогда не было. Когда другие ученые изучили данную работу и подняли тревогу, профессор Колумбийского университета отозвал статью. Студент, который стоял на пороге яркой карьеры в Принстонском университете, оказался в итоге без работы.
Почему же профессорско-преподавательский состав и рецензенты, которые должны были сохранять бдительность, не обнаружили этой грубой ошибки в самом начале? Из-за склонности подтверждать собственную точку зрения. Как позднее написала в еженедельнике New Yorker корреспондент Мария Конникова, научный руководитель студента признался, что он хотел верить в эти открытия. Он и другие ученые хотели, чтобы эти результаты оказались правдой, а потому предпочитали не подвергать сомнению те способы, с помощью которых были получены наиболее предпочтительные ответы. «Коротко говоря, склонность искать подтверждения собственному мнению – которая особенно сильна, когда мы задумываемся о социальных вопросах, – возможно, привела к тому, что ученые проглядели всю шаткость данного исследования», – писала Конникова в своем обзоре, посвященном проблемам науки {17} . Действительно, «этот энтузиазм привел к уязвимости проекта», потому что другие ученые, надеясь взять за основу данные результаты, обнаружили подлог только когда углубились в детали исследования, которое, как они полагали, уже достигло нужного итога.
17
Maria Konnikova, “How a Gay-Marriage Study Went Wrong,” New Yorker онлайн, 22 мая 2015.
Вот почему ученые, когда возможно, проверяют эксперименты снова и снова, а потом показывают результаты другим специалистам для рецензирования. Данный подход – когда он работает – заставляет коллег эксперта действовать благожелательных, но строгих «адвокатов дьявола». Как правило, исследователь и рецензенты не знают друг друга: нужно, чтобы оценка была максимально объективной.
Это бесценный опыт. Даже самому честному и самокритичному ученому или исследователю нужна реальная проверка со стороны того, кто наименее заинтересован в исходе проекта. (Рукопись книги, которую вы сейчас читаете, тоже была оценена моими коллегами. Это не означает, что эксперты, которые читали ее, согласились с ее идеями. Их попросили рассмотреть аргументы и представить любые возникшие у них возражения или советы.)
Право выступать в роли судьи зачастую выпадает более опытному эксперту, потому что способность находить и определять доказательства, которые ставят под сомнение или даже опровергают гипотезу, приходит со временем. Ученые и исследователи на протяжении значительной части своей карьеры пытаются освоить это одно из ключевых умений.
Эти рецензии и проверки остаются незамеченными для непрофессионалов, потому что все они совершаются до того, как будет выпущен конечный продукт. Публика начинает узнавать об этих процессах только тогда, когда что-то пошло не так. А когда экспертная оценка оказывается ошибочной, то это может привести к плачевным результатам. Весь проект, вместо того чтобы выдавать экспертное подтверждение качества, может превратиться в изготовление фальшивок, круговую поруку, сведение счетов, фаворитизм и подобное мелочное поведение, к которому так склонен род людской. В случае с исследованием однополых браков, подлог был обнаружен, и система сработала, хотя и с запозданием, позволив статье выйти в свет.