Обман в науке
Шрифт:
Но предметом исследования не были чудесные исцеления (лечение указанными в газете способами не проводилось). Исследование выявило нечто более интересное — иногда происходят странные вещи. Люди просто выздоравливают, несмотря на обстоятельства, по причине, которая остается неизвестной. Задачей исследования, как указали сами ученые, было продемонстрировать то, что к сообщениям о чудесных исцелениях нужно относиться с осторожностью, так как «чудеса» происходят регулярно, в 1 % случаев (по их определению) и без специальных действий. Уроком этого исследования является то, что мы не можем делать выводы из одного случая или даже из группы случаев, специально подобранных для конкретной задачи.
И что с этим делать? Взять большую группу людей, выборку из тех, кого мы надеемся вылечить, со всеми особенностями их опыта, и провести эксперимент. Если вкратце, то
«Тогда сказал Даниил Амелсару, которого начальник евнухов приставил к Даниилу, Анании, Мисаилу и Азарии:
12 сделай опыт над рабами твоими в течение десяти дней; пусть дают нам в пищу овощи и воду для питья;
13 и потом пусть явятся перед тобою лица наши и лица тех отроков, которые питаются царскою пищею, и затем поступай с рабами твоими, как увидишь.
14 Он послушался их в этом и испытывал их десять дней.
15 По истечении же десяти дней лица их оказались красивее, и телом они были полнее всех тех отроков, которые питались царскими яствами.
16 Тогда Амелсар брал их кушанье и вино для питья и давал им овощи [7] .
7
Книга пророка Даниила 12–16. — Примеч. ред.
Как вы видите, в исследовании нет никаких тайн, и если мы хотим узнать, действительно ли работает гомеопатия, мы можем поставить подобный опыт. А теперь разберемся с деталями. Мы возьмем двести человек, направляющихся к гомеопату, и разделим их случайным образом на две группы. Сначала обе группы попадут к гомеопату, узнают свой диагноз и получат рекомендации по лечению. Но в последний момент, не предупреждая никого, у одной группы гомеопатические средства заменим на простой сахар, не прошедший магическое «потенцирование». Через некоторое время мы сможем посчитать, скольким людям из каждой группы стало лучше.
Разговаривая с гомеопатами, я понял, что они боятся измерений, как будто это не простой процесс, а запихивание квадратной пробки в круглое отверстие, потому что слово «измерение» звучит научно и математически. Давайте остановимся и подумаем. В подсчете нет тайн и не используются специальные приборы. Мы просто спрашиваем людей, стало ли им лучше, и считаем количество ответов.
В процессе исследования, а иногда и просто в поликлинике мы можем попросить пациентов оценивать их боль в коленях по шкале от 0 до 10 каждый день и записывать это в дневник. Или считать количество дней в неделю, когда колени не болели. Или измерять влияние слабости на их жизнь в течение недели: сколько дней в неделю они могли выйти из дома, сколько могли гулять, сколько могли сделать работы по дому. Можно спрашивать о большом количестве простых, понятных и субъективных вещей, потому что задача медицины — улучшать жизнь и уменьшать проблемы.
Дальше процесс стоит «причесать» и стандартизировать, что позволит сравнить наши результаты с результатами других исследований (это правильно, так как позволяет лучше понять болезнь и методы ее лечения). Например, можно использовать «Общий опросник состояния здоровья», так как это стандартный «инструмент», а проще говоря, список вопросов о вашей жизни и ваших симптомах.
Если восставать против деспотов — ваш стиль, запомните: проведение плацебо-контролируемого исследования признанного метода лечения (не важно, является ли этот метод официальным или народным) — это, несомненно, диверсия. Вы подрываете ложную уверенность и отнимаете у докторов, целителей и пациентов тот метод лечения, который им раньше нравился. В медицине, как и везде, существует длинная
Таким образом, мы возьмем группу людей, вышедших из гомеопатической клиники, заменим половину пилюль на плацебо и посмотрим, кому стало лучше. Это будет плацебо- контролируемое исследование гомеопатии. Такой эксперимент был проведен и показал, что гомеопатия лечит не лучше плацебо. Но вы все еще слышите об исследованиях, подтверждающих действие гомеопатии, можно даже прочитать о них здесь. Что происходит? Ответ просто очарователен, он приводит нас к сердцу доказательной медицины. Есть отдельные исследования, подтвердившие, что гомеопатия действует лучше плацебо, но это только отдельные исследования, чаще всего с «методологическими ошибками». Звучит научно, но означает, что в способе проведения исследования были ошибки, причем настолько серьезные, что результаты нельзя считать достоверными. Литература по альтернативной медицине просто пестрит неточностями, но и в официальной медицине ошибки в исследованиях встречаются достаточно часто. По сути, будет справедливым сказать, что во всех исследованиях есть «ошибки», просто потому, что любое исследование — это компромисс между желаемым и практически возможным или дешевым. Чем отличается нетрадиционная и альтернативная медицина (НиАМ), так это интерпретацией: медики иногда знают, что цитируют недостоверные результаты и описывают ошибки в исследованиях, а гомеопаты принимают без критики любой положительный результат.
Именно поэтому важно, чтобы отчет о любом исследовании был полным, включая методы и результаты. Это частая тема в этой книге, и это важно, потому что, когда люди делают заявления, основываясь на их исследованиях, нам нужно иметь возможность узнать, насколько велики «методологические ошибки», и из этого сделать вывод о том, можно ли доверять результатам исследования. Очевидно, что делает результаты недостоверными.
Слепой эксперимент
Важная особенность хорошего исследования — то, что ни пациент, ни врач не знают, получает ли пациент гомеопатическое средство или просто сахарную пилюлю, потому что нужно быть уверенным, что разница в результатах обусловлена разницей между пилюлями, а не между ожиданиями и склонностями пациентов. Если исследователи знают, кто из их пациентов получает лекарство, а кто — плацебо, они могут испортить результаты, сознательно или неосознанно изменяя свою оценку этих результатов.
Допустим, я собираюсь испытать таблетки для понижения кровяного давления. Я знаю, кто из моих пациентов принимает новые дорогие таблетки для понижения давления, а кто — плацебо. Один из пациентов, принимающих модные таблетки для понижения давления, подходит ко мне и говорит, что у него давление зашкаливает, то есть гораздо выше, чем я могу ожидать, с учетом того, что он принимает новое дорогое средство. Поэтому, «просто чтобы убедиться в отсутствии ошибки», я повторно измеряю его давление. Следующие цифры ближе к норме, поэтому я их и записываю, не обращая внимания на высокие предыдущие.
Измерение кровяного давления, как и интерпретация ЭКГ, рентгенограммы или оценка боли по шкале, не является абсолютно точным. Я иду на обед, не зная, что я тихо и спокойно порчу данные, разрушаю исследование, создаю неточные свидетельства, то есть в конечном счете убиваю людей (потому что самая серьезная ошибка — забыть, что данные используются для принятия серьезных решений в реальном мире и приводят к страданиям и смертям).
В истории современной медицины есть несколько прекрасных примеров того, как невозможность обеспечить слепой эксперимент закончилась ошибочной оценкой эффективности метода лечения. Например, мы не знали, правда ли, что лапароскопические операции лучше полостных, пока группа хирургов из Шеффилда не провела очень театрализованное исследование, в котором использовались бинты и искусственные потоки крови, чтобы никто не знал, какого типа операция была проведена.