Остановись и подумай: Идеи и стратегии, помогающие принимать верные решения - Джейми Лестер

фотомонтажа и подлога. В этом вам помогут инструменты обратного поиска изображений{82}. Всегда помните, что фотография могла быть несколько раз изменена{83} и частично или даже полностью сфабрикована (такое происходит в последнее время все чаще).

5. Проверяйте источник цитаты с помощью расширенного инструментария Google, так как зачастую авторы новостей используют лишь отрывок цитаты или вовсе вырывают слова из контекста. Исключение из цитаты слов, которые позволяют интерпретировать ее иначе или содержат важные детали, полностью согласуется с идеей о склонности к подтверждению своей точки зрения и избеганию когнитивного диссонанса.

6. Ищите несколько подтверждений данных. Если информация цитируется во многих источниках или на нее ссылаются авторитетные издания и научные журналы, то ее с большой долей вероятности можно считать достоверной.

7. Проверяйте компетентность экспертов. Мы склонны прислушиваться к мнению профессионалов (эффект авторитета) и верить их заявлениям. Однако многие «эксперты» некомпетентны, поэтому надо проверять их биографию и заслуги, чтобы понять, какое они имеют отношение к теме, о которой высказываются.

8. Помните, что данными могут манипулировать. Многие не любят возиться с информацией и предпочитают, чтобы кто-то другой ее изучил, упростил и пересказал. Однако из-за этого возникает риск злоупотребления данными и их выборочного распространения. Изучайте наборы данных, планы исследований и методы интерпретации полученных данных, чтобы убедиться, что имеете дело с объективной информацией.

В конечном счете должна существовать прямая зависимость между неожиданной новостью и количеством доказательств, необходимых для ее подтверждения. Рассказы о том, что другие государства вмешиваются в выборы в конкретной стране, не должны шокировать, потому что правительства стран занимаются этим на протяжении всей истории. А вот сообщения о том, что тысячи избирательных участков вовлечены в какой-то заговор, должны насторожить, так как это маловероятно и для доказательства истинности этого утверждения потребуется много фактов.

Доказательства становятся все менее и менее достоверны, и это значит, что в будущем приемы борьбы с фейками, описанные в этой главе, станут как никогда актуальны. Возможно, пока вы читаете эти строки, в интернет выливают тонны дезинформации, сфабрикованных фотографий и видеодипфейков, созданных при помощи ChatGPT и других систем искусственного интеллекта. Столкнувшись с этим, остановитесь и задумайтесь о мотивах людей и эвристиках, которые они пытаются использовать себе во благо, а также при любой удобной возможности проверяйте статистические данные.

НАУЧНЫЕ ИССЛЕДОВАНИЯ

Я почти уверен, что вы, дорогой читатель, не ученый, так как, согласно статистике, наукой занимается менее 0,1 % населения нашей планеты{84}. Однако я почти уверен и в том, что вам часто приходится сталкиваться с научными (или околонаучными) данными и оценивать их точность и релевантность.

Когда вы читаете о том, что глобального потепления не существует или что печенье Oreo поможет вам похудеть, то, скорее всего, не верите этой информации – и это вполне естественно{85}. Но те, кто поддерживает эти идеи, могут ткнуть вас носом в «научные исследования», которые «доказывают» их правоту. Если на эту тему не высказалась Пола Паундстон{86} или какой-нибудь журналист-расследователь из интернета{87}, вам самим придется делать выводы об этих данных. Для этого понадобится овладеть базовым инструментарием скептика.

Большинство ученых – порядочные люди, действующие из лучших побуждений. Большинство, но не все. Наука – сфера напряженной деятельности и жесткой конкуренции, где на кону стоят большие деньги и репутация. Если бы ожидаемый результат эксперимента (а вместе с ним признание и многомиллионные гранты) зависел от каких-то на первый взгляд незначительных данных, разве вы не почувствовали бы соблазн проигнорировать эти неудобные данные? Вы и правда считаете, что другие люди будут всегда поступать правильно, даже когда в глубине души искренне верят, что их гипотеза истинна, а противоречащая их позиции информация – всего лишь случайность, и не более? Вот как раз из-за такой веры в свою правоту и желания получить признание и гранты мы и оказались в ситуации, когда 35 % научных исследований не могут быть воспроизведены другими учеными{88}, а в научных работах с заметной регулярностью появляются фотографии, обработанные с помощью графических редакторов{89}.

Важно понимать, что ученые тоже люди. Они страдают от тех же когнитивных искажений, что и все мы: ищут доказательства, подтверждающие их правоту, и не обращают внимания на то, что может привести к когнитивному диссонансу. Несмотря на то что в науке есть система защитных механизмов, призванных предотвратить фальсификацию данных, – рецензирование, рекомендации по планированию клинических исследований, статистические анализы, – человеческая природа все равно берет свое. Поэтому ученые предпочитают не публиковать те результаты исследований, которые противоречат их гипотезам, а благоприятные выводы пытаются выставить в самом выгодном свете.

В идеальном мире мы с вами были бы настолько сильны в статистике, что смогли бы сразу понять, соответствует ли нужный индикатор статистической значимости z-критерию, p-критерию, f-критерию, критерию хи-квадрат или одному из десятков других критериев, каждый из которых связан с именем какого-нибудь ученого (Пирсон, Уилкоксон, Кохрен, например). Но мы живем не в идеальном мире (и хорошо: у меня, например, и без анализа статистики дел полно), и поэтому приходится доверять экспертам. К счастью, львиную долю злоупотреблений статистикой можно обнаружить уже в плане научного исследования, и проанализировать их нам вполне под силу.

В общем и целом хорошее научное исследование должно обладать всем нижеперечисленным:

1. Широкая выборка, в идеале сотни или тысячи испытуемых.

2. Контрольная группа, которая получает лечение, соответствующее текущим стандартам, – это даст информацию, с которой можно будет сравнивать данные об эффективности нового лечения. Если стандарты лечения никак не определены, то контрольной группе должны дать плацебо: это лучше, чем ничего.

3. Беспристрастный ведущий научный сотрудник, который нашел для исследования незаинтересованного спонсора.

4. Использование двойного слепого метода исследования, чтобы ни его участники, ни сами ученые не знали, какой группе что давали, – это исключит предвзятость.

5. Рецензия на исследование, опубликованная в уважаемом научном журнале, который в идеале должен обладать высоким импакт-фактором (импакт-фактор показывает, как часто на него ссылаются другие академические издания){90}.

Если исследование не соответствует любой из этих пяти характеристик, следует усомниться в его выводах. Оно может быть довольно значимым, но в нем, скорее всего, скрыты предубеждения ученых, которые будет тяжело обнаружить и распутать, а это значит, что нам потребуется больше данных для того, чтобы окончательно убедиться в достоверности его результатов.

Помните о следующих ментальных моделях, когда читаете научные статьи:

1. Регрессия к среднему: зачастую бывает трудно воспроизвести результаты исследования, и на то есть причины. Не забывайте о том, что если 10 ученых будут по отдельности изучать одно и то же явление (скажем, эффективность генетических анализов), результаты работы опубликует лишь тот, кто добился наибольшего успеха, а остальные просто тихо свернут свои проекты. Если конкретный генетический анализ эффективен в 90 % случаев, но его результаты подвержены влиянию элемента удачи, то в первом опубликованном исследовании автор может заявить о его 95 %-ной эффективности. Только со временем, когда у нас накопится достаточно данных из других исследований, мы узнаем, что анализ на самом деле эффективен в 90 % случаев.

2. Статистическая значимость: чтобы прийти к статистически значимому результату, научная работа должна аккумулировать достаточно информации. Следовательно, эксперименты с небольшой выборкой вряд ли приведут к адекватному выводу – только если результаты исследуемой группы не сильно отличаются от показателей контрольной группы. Предположим, перед вами исследование с небольшим количеством данных (скажем, лекарство давали группе из 10 человек), поэтому вполне вероятно, что на его итоги оказала влияние воля случая – опять же, только если результаты