8 веских причин игнорировать любую статистику

Статистика может вызывать недоверие как минимум по двум причинам. Причина номер один: мозг человека очень слаб в интуитивном понимании статистических данных, мы не способны «прикинуть» (а значит, и проверить) статистику на глаз. Причина номер два: статистикой легко манипулировать (и это постоянно происходит), она даёт широкое поле для спекуляций и жонглирования данными, несмотря на строгий, математический её характер как науки.

Поэтому, прежде чем обратиться к статистике и рассмотреть её данные, следует ответить на несколько простых вопросов…

1. Кто разделяет эту статистику?

Первый способ проверить статистические данные сводится к тому, чтобы проверить, кто эти данные разделяет.


Это кажется ненаучным, поскольку следует уважать данные, а не испытывать предубеждение по отношению к тем, кто их предоставил, а также к тем, на кого они уже успели повлиять. Тем не менее, данные следует рассматривать под всеми возможными углами, а не только с точки зрения тех, кто их уже поддержал.

Должным образом подготовленная статистическая информация, по идее, должна быть непредвзятой, однако в полной мере это условие осуществить невозможно, поскольку в тот или иной момент у людей, уже прочитавших эту информацию, возникают те или иные предубеждения и они начинают отстаивать ту или иную точку зрения, тем самым мешая непредвзятому восприятию статистики.

Именно поэтому таких людей следует избегать. Даже если их доводы звучат интересно, их следует проигнорировать, а потом самостоятельно ознакомиться с первоисточником статистики.

2. Кто источник?

Часто бывает так, что никаких «комитетов по статистическим исследованиям» просто не существует. А словосочетание «статистическое исследование» часто может означать «пара человек решила опубликовать немного ерунды».

Проверить источник статистической информации — это целиком ваша ответственность, и только после проверки источника можно принимать во внимание, что именно показывает статистика.

Любая веб-страница со статистикой, как правило, заполнена красивыми графиками, в ней обычно есть только одно предложение, состоящее из чисел, а источник статистики указывается мелким шрифтом, в правом нижнем углу, голубыми буквами на синем фоне. И вы не увидите, кто источник, до тех пор, пока не просмотрите все графики, и не прокрутите страницу до конца.

И это странно. Ведь в реальной жизни мы обычно сначала смотрим, кто перед нами, и только потом решаем, стоит ему верить, или нет. Так что первое, что нужно сделать, просматривая страницу со статистикой, — найти ссылку на её источник. Если такой ссылки нет, статистика не заслуживает доверия.

3. Какова выборка?

Если размеры статистической выборки не указываются рядом с результатами статистики, то эти данные — потенциальный мусор. Если размер статистической выборки не указывается вообще, то статистика — однозначно мусор, главная цель которого не проинформировать вас о чём-то, а усыпить вашу бдительность и отключить критическое мышление.

Существует масса примеров удивительных статистических исследований, длящихся десятилетиями, в ходе которых собираются бесценные социологические данные.

Но ещё есть масса примеров бессмысленной траты бумаги, когда какие-нибудь скучающие студенты затевают собственное «статистическое исследование», не выдерживающее никакой критики.

4. Какова допустимая погрешность?

Насколько широки пределы допустимой погрешности на графике?

Если они не очень широки, то приведённые статистические данные могут быть полезны.


Если пределы широкие, то данные, возможно, менее точны, но тоже полезны. А если пределы допустимой погрешности сведены к нулю, то эти данные просто мусор.

Точные цифры выглядят более «научными», но на социологическом уровне эта «точность» и «научность» лишь показатели полной безграмотности.

Например, в физике элементарных частиц возможен лишь определённый процент точности измерений, и это многим не нравится, поскольку человек очень не любит неопределённость и очень любит конкретные цифры.

Для примера можно взять статистику о глубине отверстий, прожигаемых лазером в различных материалах. При всей мощи современных технологий абсолютно точно измерить глубину этих микроскопических отверстий не представляется возможным, так что в достоверных результатах этой статистики обязательно указывается предельно допустимая погрешность. Указав её, всё ещё можно получить полезные статистические данные.

А можно поступить иначе: просто проигнорировать эту погрешность, введя в заблуждение весь мир, но дав людям их любимые конкретные цифры.

5. «Последнее» не означает «лучшее»

Самый простой способ создать громкий заголовок — заявить, что есть некое «последнее» исследование, опровергающее все предыдущие знания о том или ином предмете. Если у вас уже есть миллион исследований, утверждающих что-то одно, то внезапное противоположное утверждение обязательно привлечет всеобщее внимание.

Чаще всего это бывает связано с продуктами питания.

Таблоиды вначале утверждают, что яйца полезны для вас, потом начинают утверждать, что яйца вредны, потом яйца снова становятся полезны, и конца этому не видно.

Противники науки пытаются использовать этот механизм, чтобы дискредитировать науку. Они используют эти противоречивые «исследования», чтобы подорвать доверие к научному прогрессу.

Единственный способ отменить результаты «последних» исследований — разработать собственную теорию, базирующуюся на результатах «старых» исследований.

Потом спланировать эксперимент, в котором предположение, выдвигаемое в «последнем» исследовании, будет делать одно, а ваша теория будет делать другое, и наконец, запустить этот эксперимент. Если предположение из «последнего» исследования подтвердится, тогда появится повод для пересмотра результатов всех предыдущих исследований. А если нет, то появится серьёзный повод усомниться в компетентности «исследователей».

6. Сомнительные заголовки

«Избыток сна может увеличить риск инсульта до 50% включительно, предполагает исследование».

Заголовок исследования, приведённый выше, лишь предполагает возможную связь между изменением режима сна и инсультом, и эта возможность требует дальнейшего серьёзного изучения. А автор заголовка превратил это предположение практически в утверждение, что «избыток сна убьёт вас».

Цель любого анализа состоит в получении ответов, свободных от эмоциональной окраски. Эти ответы не удаётся получить, когда мы видим в заголовках «с… до… включительно». Если следовать этой логике, то любые ваши повседневные действия увеличивают риск внезапного инфаркта до 100% включительно. И вот вы в ужасе уже начинаете представлять себе, каким он будет, ваш внезапный инфаркт, напрочь забыв о том, что в это «до 100% включительно» входят и другие цифры, намного меньше сотни. К примеру, ноль.

7. «Вторичная» математика

А иногда цифры бывают недостаточно страшными. Но у сочинителя заголовков есть калькулятор. Прямо на рабочем столе, чуть ниже пасьянса. Так что если в каком-то исследовании говорится, что шанс обычного человека превратиться в зомби примерно один на миллион, писатель умножает этот шанс на 7 миллиардов, и вот уже тысячи мертвецов ковыляют по улицам.

Если бы мы просто могли умножать числа в статистике на ещё большие числа, то нам вообще не понадобилась бы статистика. Потому что все мы были бы мертвы из-за тысяч исчезающее маловероятных причин, которые убили бы нас.

В тот момент, когда пишущая братия обращает свой взор на статистику, нам следует действовать так, как будто они говорят о заправке своего автомобиля небольшим количеством случайно найденного нитроглицерина. Они не знают, как он работает, у них нет представления об условиях, в которых он работает.

Так что не стоит идти туда, куда они зовут вас. Потому что их находка скоро взорвётся им в лицо.

8. Факторы ерунды

Каждый раз, когда человек встаёт со стула, его шансы травмироваться удваиваются. Это может привести к тяжёлым травмам, инвалидности и, возможно, даже смерти.

Но все эти предположения о том, как ужасно было бы, если бы всё это действительно происходило, не меняют того факта, насколько это маловероятно. Так что человеку вряд ли стоит отказываться садиться на стул.


Похожую картину часто можно видеть в сообщениях Минздрава, в которых очень серьёзно говорится, что некий фактор может внезапно утроить ваши шансы заболеть, и тогда они составят аж целых 0,0000001 процента.

Статистика может дать удивительные результаты. Ведь она работает на уровнях, недоступных нашему пониманию. Часто человеческий разум просто не может представить себе, что это такое — 7 миллиардов чего-либо.

Вместе с тем статистика — это математическая «фомка». Она может быть очень полезным инструментом в руках умного учёного, но она же может быть использована не по назначению, и тогда причинит людям вред.

Следуйте правилам, перечисленным выше, и вы будете защищены от огромного количества ерунды. Да, для этого вам придётся игнорировать большинство вещей, которыми с вами поделились в сети, но это вполне нормально, поскольку единственным универсальным статистическим законом является закон Старджона: 90 процентов всего на свете — ерунда. А работа сводится к тому, чтобы найти оставшиеся 10 процентов и построить на их основе собственный мир.