Неудивительно, что крысы с описанным недугом первыми откидывают лапки, — ведь опухоль появляется в раннем возрасте. И даже если крыса от нее не умрет, животное усыпят согласно протоколу исследования, как только масса опухоли превысит 25% массы тела. Снова сравните два верных утверждения, из которых одно вводит читателя в заблуждение. Сералини пишет: «Интересно отметить, что у первых двух самцов, умерших в группах, поедавших ГМО, были диагностированы опухоли почек массой более 25% массы тела». Статистика поясняет: «Количество опухолей почек в группе крыс, которые ели ГМО, не превосходит ожидаемого количества опухолей данного типа для данной линии крыс».
Авторы приводят утверждение, что смертность самок на ГМО диете была в 2–3 раза выше, чем в контрольной группе. Из десяти самок контрольной группы преждевременно погибли две. В группах, которые ели ГМО, преждевременно погибли 29 из 60 крыс. Вероятность получить такое же или большее отличие между группами по случайным причинам равна 0,168, что не преодолевает даже самый мягкий порог статистической значимости.
Сравните два верных утверждения, из которых одно вводит в заблуждение. Сералини пишет: «Среди самок, которые ели ГМО, было в 2–3 раза больше смертей, чем в контрольной группе». Статистика поясняет: «Статистически значимых различий между смертностью в группе самок, которые ели ГМО, и группе самок, которые не ели ГМО, не обнаружено».
Помните огромный список органов, который анализировался в данной работе? Разумеется, среди множества разных органов наверняка найдутся такие, в которых у одной группы будет больше опухолей, чем у другой, — по совершенно случайным причинам. Сералини приводит только шесть комбинаций органа и пола крысы, а все остальные данные заметаются под ковер. Куда делись результаты по еще десяткам органов? Подозреваю, что те органы, в которых у крыс, употреблявших ГМО, обнаружилось меньше патологий (не потому, что ГМО предотвращают патологии, а потому, что так велит статистика), не были представлены. Ведь это был бы абсурд! Мы все-таки вред, а не пользу ГМО доказываем! Хотелось бы взглянуть на данные по всем органам, но вот сюрприз: Сералини отказался их предоставить, когда его об этом попросили!
Остается посмотреть на те данные, что отобрал сам Сералини. Самое большое из обнаруженных различий заключалось в частоте патологий печени. В контроле две крысы имели патологии печени, а в группах, которые ели ГМО, — 30 крыс из 60. Этот результат не является статистически достоверным (P = 0,076). А мы ведь даже не учли, что в исследовании смотрели на патологии десятков органов, причем крыс разного пола рассматривали отдельно.
Сравните два верных утверждения, из которых одно вводит читателя в заблуждение. Сералини пишет: «Крысы-самцы, которые ели ГМО, в два раза чаще имели патологии печени». Статистка поясняет: «Статистически достоверных различий в количестве патологий печени или каких-либо других органов между крысами, которые ели или не ели ГМО, не обнаружено».
В конце статьи приводятся шокирующие изображения крыс, которые ели ГМО и получили страшные опухоли на половину тела. Эти фотографии производят впечатление на тех, кто никогда в жизни не видел других крыс, которые выглядят так же или даже хуже, но никогда ГМО и не пробовали. Как выглядели крысы с опухолями из контрольной группы, Сералини нам не показывает. А такие крысы были, как видно из результатов исследований. Сделав аналогичное наблюдение, профессор Тревавас задается вопросом: насколько этично держать крыс в таких условиях исключительно ради того, чтобы получить снимки, которые можно использовать разве что только для пропаганды?
Крыс с опухолями не могло не быть, ведь линия крыс Sprague-Dawley, которую использовал Сералини, была выведена специально для изучения процесса появления рака у млекопитающих! Это крысы с чрезвычайно высокой частотой появления опухолей. В течение 18 месяцев раковые опухоли образуются примерно у 45% крыс[166] (упомянутые ранее 2,2% касались конкретного типа опухолей почек). Но фотографии этих крыс до сих пор показывают по телевизору в различных передачах и фильмах о вреде ГМО.
Создается впечатление, что авторы ставили целью не разобраться в том, как ГМО действует на крыс, а рассказать историю пострашнее — и в этом они преуспели. Несмотря на очевидную ангажированность, подтасовки и намеренное выискивание закономерностей, подтверждающих вред ГМО, Сералини не смог показать ни одного статистически достоверного отличия между группами крыс, которые ели ГМ корм, и контрольной группой.
Продолжу цитировать профессора Треваваса: «Наука требует беспристрастной подачи информации. Эта статья и опубликовавший ее журнал серьезно подрывают доверие к научному знанию, основанному на доказательствах. Дабы исправить положение, статью необходимо отозвать, а авторам надлежит извиниться за то, что ввели в заблуждение общественность и научное сообщество. Я твердо намерен направить запрос в библиотеку моего университета, чтобы она больше не принимала журналы издательства Elsevier или конкретно этот журнал, если таковы стандарты их работы. Идеология и политика должны оставаться за пределами научного исследования, или мы все пострадаем»[137].
Может, конечно, и не стоило так подробно расписывать ошибки в работе Сералини, особенно учитывая, что не каждый в полной мере оценит надругательство над наукой, учиненное этим исследователем. Но я попытался показать, что разговор об ошибках в статье из научного журнала не сводится к слепому неприятию и отрицанию. Критики, внимательно прочитали статью, ознакомились с доводами авторов и нашли серьезные ошибки, существование которых можно подтвердить соответствующими выкладками.
Когда работу Сералини отозвали[124] (статью убрали с сайта, а вместо нее опубликовали письмо о том, что статья больше не числится в журнале), исследователь попытался подать на журнал в суд. Его сторонники писали, что отзыв статьи — это козни производителей ГМО. Естественно, они не стали разбираться в том, за что работу критиковали. Вскоре статья Сералини была переопубликована уже в новом, на этот раз никому не известном журнале, который называется Environmental Sciences Europe. Статья вышла без рецензий и исправления ошибок. В ней те же самые крысы и то же пренебрежение статистикой и научным методом. Журнал Nature опубликовал заметку, в которой было отмечено, что смена журнала не убеждает критиков в способности ГМ кукурузы вызывать болезни крыс.
Часто журналисты получают копии важных научных работ до публикации под соглашение о неразглашении. Благодаря этому они имеют возможность заранее подготовить статьи, проконсультироваться со специалистами, но не имеют права раньше назначенного времени публиковать свои материалы. Это нормальная практика, но в случае работы Сералини соглашение было необычным. Журналистов, получивших заранее копии статьи, заставили подписать соглашение, что при подготовке материалов они не будут консультироваться с экспертами со стороны. Это привело к волне публикаций с заголовками в стиле «Ученые доказали опасность ГМО» или «ГМ кукуруза вызывает рак», не сбалансированных комментариями независимых специалистов.
Одновременно с выходом статьи Сералини выпускает фильм с устрашающим названием «Мы все подопытные».
Разумеется, эта пиар-кампания, пародирующая научную деятельность, существенно повлияла на общественное мнение о безопасности генной инженерии. К тому времени, как эксперты подтянулись и нашли в работе многочисленные ошибки, ущерб уже был нанесен. «Ложечки нашлись, а осадок остался».
Вообще статей, описывающих опасности ГМО, на удивление мало, учитывая общее количество публикаций про такие организмы: только за последние десять лет опубликовано более полутора тысяч исследований[167]. Если мы с таким же старанием и рвением попытаемся проверить безопасность чего-нибудь совсем безобидного, например обычных бананов, мы наверняка по чистой случайности наткнемся на какие-то потенциальные эффекты от их употребления или выращивания, которые можно будет назвать «нежелательными». Даже если на самом деле таких эффектов нет.
При этом достаточно лишь одной низкокачественной работы о вреде ГМО или одного ложноположительного результата, чтобы поднять массовую истерию и похоронить труды тысяч ученых и сотен популяризаторов науки. Социальные последствия не исправят никакие разборы, отзывы статей из журналов и указания на отсутствие воспроизводимости результатов. Поэтому, когда вы снова услышите громкие слова об ученых, которые доказали вред ГМО, задайте себе вопрос: а не очередной ли это Сералини?
Завершая краткий экскурс в статистику, я бы хотел затронуть еще одну интерпретацию понятия «вероятность». В байесовской статистике вероятность определяется не как частота какого-то события, а как степень уверенности в истинности суждения. Гипотезы не строго отвергаются на основании статистических тестов — им приписываются вероятности. Попробуем продемонстрировать ситуацию, когда классическая статистика с ее P-значениями проигрывает байесовской.
Представьте, что пациент прошел тест на ВИЧ. Этот тест с вероятностью 96% правильно определяет наличие или отсутствие данного вируса. Тест показал, что пациент ВИЧ-положительный. Вероятность случайной ошибки здесь меньше, чем порог статистической значимости а (0,05). Означает ли это, что нам стоит отвергнуть нулевую гипотезу, принять альтернативную — что пациент инфицирован — и предложить ему срочно лечиться? Казалось бы, да. Но байесовская статистика предлагает посмотреть и на саму вероятность быть зараженным. По данным ВОЗ, в России ВИЧ-инфицированы около 1% населения, но это меньше, чем вероятность ошибки в тесте!
Действительно, из 100 тысяч человек 1000 будут ВИЧ-инфицированы. Из 99 тысяч здоровых людей 95040, пройдя тест, получат отрицательный результат и 3960 — положительный. Из 1000 зараженных 960 получат положительный диагноз, а 40 — отрицательный. Из 4920 ВИЧ-положительных только 960 человек на самом деле заражены, то есть с вероятностью больше 80% наш пациент окажется здоровым! Поэтому очень важно пройти повторное тестирование, желательно независимыми методами. Только когда вероятность ошибки станет меньше, чем вероятность верного диагноза, имеет смысл начинать переживать всерьез. Первый тест является веским основанием для проведения второго, но не является приговором. Отмечу, что цифры я использовал приблизительные, а реальные тесты могут иметь точность отличную от приведенной.