Потому что прибором служил человеческий глаз, а человек заранее знал, что должен увидеть.
Триста статей о том, чего не было
С 1903 по 1906 год около ста двадцати учёных опубликовали почти триста статей о новом виде излучения. Автор открытия выпустил больше двух десятков работ и книгу, один из его коллег — тридцать восемь сообщений за те же три года.
Речь идёт об N-лучах, названных в честь университета Нанси, где их открыл профессор Проспер-Рене Блондло.
N-лучей не существует.
При этом ни один из ста двадцати авторов не был жуликом. Все они честно наблюдали то, о чём писали. Разобраться, как это возможно, полезнее, чем разоблачать.
Почему в это было легко поверить
Посмотрим на календарь. В 1895 году Рентген открыл X-лучи, в 1896-м Беккерель — радиоактивность, тогда же окончательно оформилось представление об электроне. За десять лет физика обзавелась целым набором невидимых излучений, о которых прежде никто не подозревал.
В такой обстановке ещё одно новое излучение выглядело не сенсацией, а ожидаемым продолжением. Место для него было заранее приготовлено.
Блондло был уважаемым физиком, членом-корреспондентом Академии наук, с солидным списком точных работ за плечами. Он не искал сенсации: N-лучи он заметил, пытаясь поляризовать X-лучи, и увидел, что искра в разряднике стала чуть ярче.
Всё сложилось: подготовленное ожидание, авторитетный наблюдатель, правдоподобная гипотеза.
В чём состояло наблюдение
А вот здесь начинается самое важное.
Детектором служил человеческий глаз в тёмной комнате. Наблюдатель смотрел на слабо светящуюся нить, искру или экран, покрытый сернистым кальцием, и решал, стала ли она чуть-чуть ярче. Часто свечение оценивали боковым зрением — в темноте периферия сетчатки чувствительнее.
Объективной регистрации не было. Фотографировать пробовали, но выдержку задавал сам экспериментатор.
Дальше N-лучи обнаружились повсюду: их испускали Солнце, газовое пламя, раскалённый металл, кирпич, полежавший на солнце, — и, по утверждению одного из коллег Блондло, нервы и мышцы человека и животных, причём даже после смерти.
И вот деталь, на которую стоит обратить особое внимание. Кирпич, пролежавший на солнце и завёрнутый в чёрную бумагу, «излучал» N-лучи. Но эффект не зависел от количества кирпичей.
Это тревожный признак в чистом виде: отклик не растёт с ростом причины. Если удвоение источника ничего не меняет, измеряется не источник.
Вуд в Нанси, сентябрь 1904
Проверить лабораторию в Нанси поехал американский физик Роберт Вуд.
Опыт, который ему показывали, состоял в следующем: N-лучи проходили через алюминиевую призму, раскладывались в спектр, и наблюдатель называл положения линий, следя за яркостью слабо освещённой нити.
В темноте Вуд вынул алюминиевую призму — ту самую деталь, без которой никакого спектра быть не могло, — и положил в карман.
Блондло продолжал называть положения линий. Как раньше.
Затем Вуд подменил стальной напильник, который якобы испускал N-лучи, куском дерева. Результат наблюдений не изменился.
Но самое поучительное было третьим. Вуд, ничего не трогая, изобразил в темноте возню возле установки — и ассистент немедленно заявил, что американец сбил настройку и опыт не идёт.
То есть ложным оказалось не только утверждение о наличии эффекта при отсутствии причины, но и утверждение об отсутствии эффекта при её наличии. Показания следовали не за установкой, а за представлением наблюдателя о том, что с установкой происходит.
Отчёт Вуда вышел в Nature в сентябре 1904 года. После этого появились ещё две статьи об N-лучах — вероятно, посланные в редакцию раньше.
Почему приём Вуда сильнее любого спора
Вуд не спорил. Он не доказывал, что лучей нет, — доказать отсутствие вообще трудно.
Он сделал другое: тайно устранил элемент, без которого заявленный эффект невозможен, и посмотрел, изменится ли результат. Результат не изменился — и этого достаточно.
Мы разбирали этот ход в статье про эффект Мпембы под названием диверсионного подхода: вместо вопроса «существует ли явление» задаётся обратный — «как получить убедительные свидетельства явления, которого нет». Вуд применил тот же приём в реальном времени, прямо в чужой лаборатории.
И добавил к нему то, что в современной методике называется контролем в обе стороны. Одного опыта — «убрали причину, эффект остался» — уже хватало. Второй опыт — «причину не трогали, а наблюдатель объявил, что эффекта нет» — закрыл единственную оставшуюся лазейку: возможность списать первый результат на случайность.
Шесть признаков
Через полвека Ирвинг Ленгмюр, разбирая этот и подобные случаи, сформулировал признаки того, что он назвал патологической наукой. Список стоит держать под рукой.
Эффект вызывается едва обнаружимой причиной, и его величина почти не зависит от интенсивности причины. Это про кирпичи.
Эффект лежит у порога обнаружения, поэтому требуется множество наблюдений при низкой достоверности каждого.
Заявляется очень высокая точность. Блондло называл показатели преломления N-лучей с несколькими знаками.
Выдвигаются фантастические теории, противоречащие имеющемуся опыту.
Критика парируется объяснениями, придуманными на ходу. В случае N-лучей главным было: не видите — значит, недостаточно тренированы. Это делает утверждение неопровержимым.
Число сторонников растёт примерно до половины сообщества, а затем падает до нуля. Ровно то, что произошло за три года.
Обратите внимание, что ни один из признаков не касается содержания гипотезы. Все они относятся к способу получения и защиты результата.
Чего не было
Раз уж эта рубрика посвящена аккуратности, поправим и легенду.
Часто пишут, что Блондло сошёл с ума и умер в позоре. Это неправда. Он продолжал работать, вышел в отставку в обычном порядке и умер в 1930 году. Разоблачение стоило ему репутации первооткрывателя, но не рассудка.
И второе. История N-лучей — не про глупость французской физики. Это история про методику, а не про людей: те же сто двадцать человек в других своих работах не ошибались, потому что там показания снимали приборы.
Механизм самообмана
Соберём схему.
Любая измерительная система состоит из источника, объекта и детектора. Здесь детектором был человек — и человек, знавший, включено воздействие или нет.
Возникает замкнутый контур: гипотеза порождает ожидание, ожидание влияет на суждение о едва заметном изменении, подтверждённое суждение укрепляет гипотезу. Обратная связь положительная, и в ней нет ничего, что могло бы её остановить.
Усугубляют дело две вещи. Чувствительность тёмноадаптированного глаза сама по себе плавает на масштабе минут, так что «усиление свечения» происходит и без всякой причины. А неудачи посторонних объяснялись недостатком навыка — то есть гипотеза была защищена от опровержения по построению.
Лекарство известно и просто: наблюдатель не должен знать, включено воздействие или нет. Именно из таких историй выросла практика слепых и двойных слепых протоколов, а в физике — слепой анализ данных, когда обработку доводят до конца, не зная истинных значений.
Как это лечат сегодня
История с N-лучами не осталась просто анекдотом — из неё и подобных ей выросла целая система предосторожностей.
Ослепление наблюдателя. В медицине это двойной слепой метод: ни пациент, ни врач не знают, кто получил препарат. В физике то же самое называется слепым анализом: обработку данных доводят до конца на смещённых или зашифрованных значениях и «открывают ящик» только тогда, когда методика зафиксирована и менять её уже нельзя. Так работают и в физике частиц, и в космологии — именно чтобы исследователь не мог подкрутить обработку, увидев, что результат «не тот».
Предварительная регистрация. План эксперимента и способ обработки публикуются до получения данных. Это лишает возможности задним числом объявить удачным тот вариант анализа, который дал желаемое.
Объективный регистратор вместо глаза. Простейшее и самое действенное: там, где показание снимает прибор, контур ожидания разрывается сам собой.
Полезно, впрочем, отметить и границы этих мер. Ослепление защищает от ожиданий наблюдателя, но не от систематической ошибки прибора и не от отбора при публикации: отрицательные результаты по-прежнему пишут реже и печатают неохотнее.
И два поучительных случая из более близкого времени. Поливода — «аномальная вода» с необычными свойствами — изучалась около десяти лет десятками лабораторий, пока не выяснилось, что дело в примесях из стеклянных капилляров; здесь тему закрыли образцово, и первым признал ошибку сам первооткрыватель. Холодный термоядерный синтез 1989 года прошёл ту же кривую сторонников и критиков, что описана у Ленгмюра, только за месяцы вместо лет — быстрее только потому, что проверяющих было больше.
Что здесь сработало
Методические ходы, решившие дело:
Тайное устранение необходимого элемента. Не спор, а проверка необходимости.
Контроль в обе стороны. Проверено и ложное «есть», и ложное «нет».
Проверка зависимости отклика от причины. Кирпичи, не дающие удвоения эффекта.
Внешний проверяющий. Человек, не вложивший в гипотезу ни репутации, ни трёх лет работы.
Признаки, не зависящие от содержания. Список Ленгмюра оценивает процедуру, а не идею.
Итог
Сто двадцать честных исследователей три года изучали свойства собственного ожидания, приняв его за излучение. Прекратил это один человек, вынувший из установки призму и промолчавший об этом.
А суть умещается в одну фразу:
Если прибором служит человек, знающий, что должно получиться, вы измеряете не явление, а ожидание.
