Обман в науке - Бен Голдакр

Если вы их перемножите, то безобидные и вероятные события быстро превратятся в крайне невероятные. Допустим, вы работали в 20 больницах, в каждой их которых произошел безобидный инцидент: пи-величина p = 0,5. Если вы перемножите эти величины, характеризующие совершенно случайные события, вы получите итоговое значение p = 0,520, то есть р < 0,000001, что является абсолютно статистически значимым. При такой математической ошибке и соответствующем рассуждении, если вы часто меняете больницы, в которых работаете, вы автоматически становитесь подозреваемым. Вы работали в 20 больницах? Пожалуйста, не говорите об этом голландской полиции.

15. Медицинские страхи

В предыдущей главе мы рассматривали индивидуальные случаи: они могли быть вопиющими и в некоторых отношениях абсурдными, но спектр вреда, которые они могли причинить, ограничен. Мы уже видели на примере совета доктора Спока о том, как младенцы должны спать, что, когда вашему совету следует большое количество людей, а вы не правы, даже при самых лучших намерениях вы можете нанести большой вред, поскольку риск возрастает с увеличением количества людей, которые начинают менять свое поведение.

По этой причине журналисты несут особую ответственность, и вот почему мы посвятим последнюю главу этой книги изучению процессов, которые стоят за двумя очень показательными журналистскими страшилками: обманами по поводу метициллин резистентного золотистого стафилококка (MRSA) и вакцины MMR. Но как всегда, то, о чем мы будем говорить, выходит за рамки этих двух историй, и мы будем неоднократно отвлекаться от них.

Есть много способов, которыми журналисты могут обманывать читателя: тенденциозный подбор данных или манипуляция статистикой; паника по поводу простуды или ссылки на утверждения авторитетных фигур. Страдания по поводу MRSA 2005 года ближе к тому, что можно назвать «много шума из ничего», чем все то, на что я натыкался до сих пор.

Я впервые узнал, что происходит, когда мне позвонил мой друг, «работающий под прикрытием» журналист на телевидении. «Я только что получил работу уборщика, чтобы взять мазок с метициллин резистентным стафилококком для моего “грязного больничного скандала с супермикробами”, - сказал он, — но результаты получились отрицательными. Что я сделал неправильно?» Я был счастлив помочь и объяснил, что этот штамм стафилококка плохо выживает на окнах и дверных ручках. Истории, которые он везде слышал, были либо придуманы, либо… сфабрикованы. Через десять минут он перезвонил и триумфально заявил: он поговорил с журналисткой из одного известного таблоида, и она сказала ему точно, в какую лабораторию следует отдавать мазки на анализ: «Эта лаборатория всегда дает положительные результаты», — это ее слова. Оказалось, что это лаборатория Chemsol Consulting, которой руководит доктор Кристофер Малишевич (Christopher Malyszewicz). Если вы когда-нибудь видели скандал с положительным мазком на наличие супермикроба MRSA, то он явно происходил оттуда. Они все оттуда.

Микробиологи из различных больниц были обескуражены, когда их учреждения пали жертвой этой истории. Они брали мазки с тех же самых поверхностей, посылали их в разные авторитетные лаборатории, включая свои собственные, но в этих мазках ничего не вырастало, все результаты были отрицательными, в отличие от результатов Chemsol. Статья известного микробиолога, который описал весь этот процесс в отношении больницы при Университетском колледже Лондона, была опубликована в одном из самых авторитетных академических журналов и демонстративно проигнорирована всеми средствами массовой информации.

Прежде чем пойти дальше, следует прояснить одну вещь, которая связана со всем этим разделом книги: очень благоразумно беспокоиться о своем здоровье и учитывать факторы риска. Не стоит доверять авторитетам и в данном конкретном случае: множество британских больниц не настолько чисты, как нам бы хотелось. В Великобритании MRSA более распространен, чем в других странах, и тому есть несколько причин, включая меры по контролю инфекции, чистоту, порядок прописывания лекарств или что- то другое, о чем мы пока не подумали (я уже заговорился).

Но мы говорим об одной частной лаборатории, у которой масса работы благодаря журналистам, которые тайно берут в больницах мазки, чтобы раздуть из этого историю, и которая выдает сплошь положительные результаты.

Я решил позвонить доктору Крису Малишевичу и спросить, как так получается.

Он ответил, что не знает, и предположил, что больничные микробиологи, вероятно, берут мазки не в тех местах и не в то время. Он объяснил, что они, наверное, некомпетентны. Я спросил, почему таблоиды всегда выбирают его лабораторию (и написали уже более двадцати статей, включая памятную «швабру смерти» на первой полосе газеты Sunday Mirror). Он понятия не имел. Я спросил, почему многие микробиологи утверждают, что он отказывается полностью раскрыть свои методы, когда они хотят повторить их в своих лабораториях, чтобы понять это несоответствие результатов. Он сказал, что он ничего не скрывает (я теперь подозреваю, что он так запутался, что сам поверил, что это правда). Он также неправильно произносил названия некоторых известных бактерий.

Тут я спросил доктора Малишевича о его дипломе. Я не люблю критиковать работу человека, основываясь только на его личности, но в данных обстоятельствах вопрос казался уместным. На основании нашего телефонного разговора у меня как-то не сложилось впечатления, что это человек с достаточным интеллектом, чтобы руководить сложной микробиологической лабораторией.

Он ответил, что у него есть степень бакалавра Лестерского университета, — если быть точным, то Лестерского политехнического института. Он сказал также, что у него есть докторская степень. News of the World назвали его «уважаемым специалистом по MRSA доктором Кристофером Малишевичем». Sun назвала его «лучшим в Великобритании экспертом по MRSA» и микробиологом. Аналогично его преподнесли и в газетах Evening Standard и Daily Mirror. Интуитивно я задал ему сложный вопрос. Он согласился, что получил свою докторскую степень в заочном неаккредитованном колледже в Америке. Он согласился с тем, что эта степень не признается в Великобритании. У него нет диплома по микробиологии и нет даже подготовки в этой области (журналистам многократно говорили это профессиональные микробиологи). Он был очень любезен и рад поговорить. Что он делал в своей лаборатории?

Есть много способов отличить один вид бактерий от другого, и вы даже можете проделать кое-какие опыты дома с помощью дешевого игрушечного микроскопа: посмотреть на образцы и определить форму бактерий или какие краски они поглощают, какой формы и цвета колонии они образуют при выращивании в культурной среде в стеклянной чашке, оценить, влияют ли некоторые факторы на их рост (присутствие определенных антибиотиков или определенных питательных веществ). А можно еще сделать анализ их ДНК, — и это только несколько примеров.

Я говорил с доктором Питером Уилсоном (Peter Wilson), микробиологом из Университетского колледжа Лондона, который пытался получить информацию от доктора Малишевича о его методах определения присутствия MRSA, но добился только невразумительных объяснений. Он попытался использовать ту же среду, которую использовал доктор Малишевич и на которую он полагался, чтобы отличить MRSA от других штаммов бактерий, но выяснилось, что другие бактерии также прекрасно растут на ней. Тогда люди попытались получить от него пластинки с образцами, которые, как утверждал Малишевич, содержали MRSA. Он отказался. Журналисты были проинформированы об этом. Тогда он выдал восемь пластинок. Я говорил с микробиологами, которые их тестировали.

На шести из восьми пластинок, которые, по мнению доктора Малишевича, содержали MRSA, лаборатория не нашла ничего (хотя их подвергали разнообразным методам микробиологического анализа, включая полимеразную цепную реакцию [PCR]). На двух пластинках действительно был обнаружен MRSA, но очень необычный штамм. У микробиологов есть огромные библиотеки генетического строения различных типов инфекционных агентов, которые используются, чтобы установить, как различные заболевания распространяются по миру. Используя эти банки данных, мы можем видеть, например, что штамм вируса полиомиелита из провинции Кано в Северной Нигерии неожиданно появился на другом конце света и начал убивать людей (следствие страха перед вакцинацией).

Этот штамм MRSA никогда не находили в Великобритании, он (довольно редко) встречается только в Австралии. Шанс того, что он в диком виде был найден на Британских островах, крайне мал: скорее всего, это примесь, результат той работы, которую лаборатория Chemsol выполняла для австралийских таблоидов. На других шести пластинках, на которых доктор Малишевич нашел MRSA, были только бациллы, распространенные, но отличающиеся от стафилококков бактерии. MRSA выглядят как шарики. Бациллы похожи на палочки. Вы можете их отличить друг от друга с помощью микроскопа со стократным увеличением.