Большинство опубликованных научных данных не соответствует действительности — с этого громкого заявления в 2005 году началась медийная история Джона Иоаннидиса. Профессор Стэнфордского университета пришел к таким выводам после статистического анализа исследований, собранных в научных базах данных. [...]
Что это означает для нас, потребителей науки? Кому верить? Как выжить в хаосе медицинской дезинформации? Буквально так и звучит название еще одной работы Иоаннидиса. Чтобы получить ответы на эти вопросы, Reminder сходил на лекцию знаменитого ученого в петербургском ИТМО. Ее главная идея: доказательная медицина больна, но излечима. Простых рецептов он не дал. Зато привел много фактов, на основе которых мы составили небольшой гайд. Итак, на что обращать внимание при чтении медицинских новостей?
1. Кто, где, когда?
Будь то заметка о вреде сладкого или о пользе сна, мы всегда примеряем новую медицинскую информацию к себе. Но не всегда делаем это правильно. [...] Начнем с самого простого.
Мыши или люди?
Удивительно, как часто в очередной заметке о вреде кофеина забывают уточнить, что опыты проводились на мышах. Насколько мыши похожи на вас? [...] Хотя гены, кодирующие белки, у нас и мышей совпадают почти на 70%, благодаря чему они и стали «модельными организмами», мыши все равно отличаются от людей. Настолько сильно, что эффективные для них лекарства от диабета вообще не действуют на нас из-за различий в инсулин-синтезирующих клетках. Все, кто интересуется борьбой со старением, наверняка помнят, как 11 лет назад фармацевтический концерн GalaxoSmithKline выложил сотни миллионов долларов за препарат для омоложения Vivix на основе природного антиоксиданта ресвератрола, который называли новым словом в борьбе со старением, раком и синдромом Альцгеймера. А потом оказалось, что этот «эликсир молодости» продлевает жизнь только грызунам и дрожжам, но не людям.
Состав и количество участников
Даже если в исследовании участвовали не мыши, а люди, остаются вопросы: насколько они похожи на вас по состоянию здоровья и условиям жизни, одного ли с вами возраста и пола? [...] Еще один важный вопрос: сколько человек участвовали в интересующем вас исследовании. Вы удивитесь, но часто это даже не сотни и десятки, а гораздо меньше. Например, в нашумевшем эксперименте по откату эпигенетических часов принимали участие всего 9 человек, а эффект наблюдался у семи. Причем среди них не было ни женщин, ни детей. С детьми вообще все сложно. Новые лекарства не тестируют на детях по этическим соображениям. Но часто прописывают им после тестов на взрослых. Так получилось с ингибиторами моторного насоса — это препараты нового поколения для лечения желудочно-кишечных заболеваний. Как пишетамериканский педиатр Аарон Кэрролл, после удачных клинических испытаний на взрослых их стали в семь раз чаще выписывать маленьким детям, пока, наконец, не выяснилось, что они приносят им больше вреда, чем пользы.
Дата проведения исследования
В продуктовом магазине мы, как правило, проверяем дату на упаковке, так же поступайте с научной информацией. У нее тоже есть срок годности. Классичесий пример — повторяющаяся в статьях и книгах информация о том, что 95% попыток перейти на здоровое питание терпит крах. Такие результаты действительно были получены в 1959 (!) году при обследовании сотни страдавших ожирением пациентов в одной-единственной больнице. [...]
2. Как проводилось исследование
Есть два типа исследований, которые чаще всего дают повод для громких заголовков: рандомизированные контролируемые (РКИ) и обзорные. Разница между ними, если свести ее к самому простому, заключается в том, что в первом случае изучают людей, а во втором — раннее проведенные исследования. [...]
РКИ
В таких исследованиях участники распределяются методом рандомизации, то есть случайным образом, по двум группам, в одной из которых применяется настоящее лекарство, а в другом плацебо. РКИ считаются «золотым стандартом» клинических испытаний. Но так ли это на самом деле? Иоаннидис приводит такую статистику: 25% «эталонных» рандомизированных исследований дают неверные результаты.
Обзорные исследования
В исследованиях такого типа сопоставляется информация, полученная в ходе других исследований и собранная в больших базах данных типа Medicare, Medicaid и Medpub. Имейте в виду, что используемые работы могли быть нацелены на решение совсем не той проблемы, которая интересует авторов обзорного исследования. [...]
И еще важная деталь: в обзорных исследованиях всегда выявляется не причинно-следственая связь, а корреляция. И это не одно и то же. [...]
Главная проблема обзорных исследований в том, что из одних и тех же данных можно делать разные выводы, если применять разные методы анализа. Стив Помрой из RealClearScience подсчитал, что из-за этого канцерогенами хотя бы раз объявлялись практически все продукты (и не только пищевые): от молока до фейсбука. [...]
3. Кто платит?
Узнать это из популярной статьи не всегда просто. Но если там упомянут конкретный препарат, вы всегда можете посмотреть, кому принадлежит эта торговая марка. Вероятно, именно владелец финансирует исследования.
В оригинале научной публикации такая информация, по правилам, приводится в графе «конфликт интересов». Но мы не можем быть на 100% уверены, что авторы исследования раскрывают всю финансовую информацию, отмечает в своей лекции Иоаннидис. И приводит такую статистику: из 57 отчетов клинических испытаний, опубликованных в 2011 году, в 55 случаях было доказано, что продвигаемый спонсором препарат как минимум не уступает по эффективности уже имеющимся на рынке аналогам. Красноречивое совпадение.
Но есть и другая статистика. Фармацевтическая компания Bayer вынуждена закрывать почти две трети клинических испытаний по той простой причине, что результаты проверки препаратов не соответствуют положительным данным независимых исследований, которые финансировались научными учреждениями без всякого «конфликта интересов». А биотехнологическая компания Amgen в 2012 году смогла воспроизвести результаты лишь шести из 53 независимых онкологических исследований. Так что, если исследования проводятся на коммерческой основе, это еще не значит, что их данные автоматически менее надежны или недостаточно объективны. [...]
4. О чем на самом деле идет речь в исследовании?
Цели и результаты научной работы очень часто не имеют ничего общего с их интерпретацией в популярных медиа. Особенно это касается исследований в области здорового питания.
«12 лесных орехов в день продлевают жизнь на 12 лет (плюс один год за орех), аналогичный прирост дают 3 чашки кофе в день, а всего один мандарин в день добавит вам пять лет жизни. И наоборот, 1 яйцо в день сократит жизнь на шесть, а 2 куска бекона на десять лет, даже больше, чем сигареты. Могут ли эти данные быть правдой?»
Иоаннидис — и сам живая иллюстрация этой проблемы. Его обвиняют в том, что он очерняет науку. Но своей репутацией разоблачителя он во многом обязан СМИ. На сайте Американского совета по науке и здоровью его даже сравнивают с четвертым всадником Апокалипсиса. А из статей о нем складывается впечатление, что он уличает ученых в фейках. Как же тогда ему удалось поработать с 1328 соавторами из 538 научных учреждений в 43 странах мира?
На самом деле научное сообщество благожелательно относится к его исследованиям. И на лекции в Петербурге было много представителей той самой доказательной медицины, которую он якобы разоблачает. Да, результаты разных исследований нередко не согласуются, порой даже прямо противоречат друг другу. А выводы, которые из них делают, не всегда обоснованы на сто процентов и часто опровергаются со временем другими исследованиями. Но так и работает наука, пишет о находках Иоаннидиса The Gardian. Ее методы постоянно совершенствуются, данные уточняются, ошибки обнаруживаются и исправляются. Так что, если медицинская новость кажется вам слишком хайповой, загляните в оригинал. В случае Иоаннидиса он будет звучать так: «Ошибаться в науке нормально и даже необходимо».
Источник - Anastassia Ivanova, Reminder
Дополнительные возможности
Бесплатная консультация И.Л. Викентьева по вопросам творческой деятельности, развития личности и #ТРИЗ 02 Февраля 2020 в 19:59 (мск)
Изображения в статье
Джон Иоаннидис, директор Исследовательского центра по профилактике и руководитель METRICS (Инновационного центра метаисследований) в Стэнфорде. Фото: StanfordDeptMed
Изображение Tibor Janosi Mozes с сайта Pixabay
Изображение Benjamin Balazs с сайта Pixabay
Изображение congerdesign с сайта Pixabay
Изображение Bruno /Germany с сайта Pixabay