Как эффективно продемонстрировал Даниэль Кевлес в своей книге 1990 года The Baltimore Case («Дело Балтимора»), при расследовании возможного научного мошенничества, если говорить техническим языком, «основная проблема состоит в обнаружении сигнала обмана на фоне шума ошибок и разгильдяйства», которые обычно включены в научный процесс. Исследование научных записей (проведено независимым комитетом, утвержденным Конгрессом для расследований возможных случаев научного мошенничества) в лаборатории лауреата Нобелевской премии Дэвида Балтимора выявило удивительное количество ошибок. Наука пребывает в гораздо большем беспорядке, чем многие себе представляют.

Балтимор был оправдан, когда стало ясно, что не было никакой целенаправленной подтасовки данных.

2. Часто ли данный источник делает такие утверждения?

Лжеученые имеют привычку выходить далеко за границы фактов. Поэтому когда люди делают многочисленные экстраординарные заявления, они могут стать чем-то большим, нежели просто возмутителями спокойствия. Это вопрос количественного масштабирования, так как некоторые великие мыслители часто выходят за рамки данных в своих творческих умозрениях. Томас Годл из Корнельского университета хоть и известен своими радикальными идеями, но достаточно часто оказывается прав, так что другие ученые прислушиваются к его мнению. Голд предполагает, например, что нефть — не ископаемое топливо, а побочный продукт глубокой горячей биосферы. Почти никто из ученых, с которыми я разговаривал, не воспринимает этот тезис всерьез, однако они не считают Голда чудаком. Поэтому мы ищем здесь примеры периферийного (выходящего за общепринятые рамки) мышления, которое последовательно игнорирует или искажает данные.

3. Были ли эти утверждения подтверждены каким-либо другим источником?

Обычно лжеученые делают или никем непроверенные заявления, или проверенные представителями группы людей с такими же убеждениями. Мы должны спросить о том, кто проверяет утверждения, и даже о том, кто проверяет тех, кто проверяет. Самая большая проблема с неудачей холодного ядерного синтеза, например, состоит не в том, что ученые Стэнли Понс и Мартин Флейшман ошиблись, а в том, что они объявили (на пресс-конференции, что удивительно) о своем захватывающем открытии прежде, чем оно было проверено в других лабораториях. И что еще хуже, когда холодный ядерный синтез не был воспроизведен, они продолжали цепляться за свое мнение.

4. Как это утверждение соотносится с тем, что мы уже знаем об окружающем мире?

Необычные утверждения должны быть помещены в более широкий контекст, чтобы посмотреть, вписываются ли они в окружающую действительность. Когда люди утверждают, что пирамиды и Сфинкс построены более десяти тысяч лет назад передовой человеческой расой, они не предоставляют сопутствующего контекста существования этой более ранней цивилизации. Где остальные артефакты тех людей? Где их произведения искусства, оружие, одежда, инструменты, останки? Археология работает совсем не так.

5. Кто-нибудь побеспокоился об опровержении данного утверждения или были найдены только подтверждающие доказательства?

Это предвзятость подтверждения, или склонность искать подтверждающие доказательства и отрицать (или игнорировать) неподтверждающие. Предвзятость подтверждения — мощная и широко распространенная проблема, и ее практически никому невозможно избежать. Именно поэтому важны научные методы, которые придают особое значение проверкам и перепроверкам, верификации и повторяемости опытов и в особенности попыткам доказать ложность утверждения.

6. Более веские доказательства приводят к такому же заключению, что сделал автор утверждения, или другому?