Отрывок из книги «Полный бред! Скептицизм в мире больших данных»

N+1Наука

«Полный бред! Скептицизм в мире больших данных». Как относиться к получаемой информации критически

Манн, Иванов и Фербер, научно-популярные книгоиздатели

Если кто-то подкрепляет утверждения затейливыми терминами, цифрами и красивыми графиками, это еще не значит, что ему можно доверять. Статистика и язык точных наук могут быть всего лишь инструментами, призванными скрыть обман. Тот, кто умеет анализировать и перепроверять информацию, скорее всего, заметит подвох — остальные рискуют попасться в ловушку. В книге «Полный бред! Скептицизм в мире больших данных» (издательство «Манн, Иванов и Фербер»), переведенной на русский Елизаветой Пономаревой, ученые Карл Бергстром и Джевин Уэст рассказывают, как распознать чушь (в оригинале — bullshit) и почему для этого совсем не обязательно быть специалистом, а достаточно воспользоваться обыкновенной логикой. Предлагаем вам ознакомиться с фрагментом, посвященным «ошибке прокурора» и уровню значимости (p-value).

Ошибка прокурора

Как мы видели, в большинстве научных исследований ищут закономерности в данных, позволяющие делать выводы о мире. Но как отличить закономерность от случайного шума? И как определить, насколько она значима? Существует несколько способов это сделать, и самый распространенный — это использование р-значения. Грубо говоря, р-значение указывает, насколько вероятно, что наблюдаемая закономерность возникла по чистой случайности. Если это маловероятно, то мы можем сказать, что результат статистически значим. Но что это на самом деле означает и как нам трактовать р-значение? Мы ответим на эти вопросы с помощью короткой истории.

Представьте, что вы известный адвокат, который защищает скромного биолога, обвиняемого в самом поразительном похищении предмета искусства в современной истории.

Это сенсационное преступление. Богатая собирательница отправила частную коллекцию из тридцати шедевров европейского искусства на охраняемом поезде из своего особняка в Санта-Кларе в аукционный дом в Нью-Йорке. Когда поезд достиг пункта назначения, коробки отнесли в аукционный дом для распаковки. Путешествие прошло без происшествий, и к коробкам, на первый взгляд, никто не прикасался. Но, к всеобщему ужасу, четыре самые ценные картины были вырезаны из рам и исчезли! Ни полиция, ни страховая компания не нашли ни единой улики, не считая единственного отпечатка пальца на раме одной из пропавших работ. Украденные шедевры так никогда и не отыскали.

При отсутствии каких-либо иных наметок полиция прогнала от печаток пальца через огромную базу данных ФБР и нашла совпадение — отпечаток вашего клиента. (Он сдал свои отпечатки Администрации транспортной безопасности в обмен на возможность проходить досмотр в аэропорту, не снимая ботинок.) На допросе выяснилось, что у вашего клиента нет алиби. Он утверждает, что ни с кем не контактировал две недели, пока выслеживал окольцованную куропатку в горах Высокая Сьерра в рамках научного проекта.

Несмотря на отсутствие алиби, вы уверены, что ваш клиент не может быть виновен. Он всего лишь застенчивый ученый, а не хладнокровный похититель шедевров. У него уже есть два гранта NSF на исследование размножения куропаток, и, похоже, он не нуждается в дополнительных источниках дохода. К тому же, насколько вы заметили, он ни черта не понимает в искусстве; да что там, он считает, что Донателло — это черепашка-ниндзя.

Тем не менее начинается судебный процесс, и вы сталкиваетесь с блестящей молодой звездой прокуратуры. После описания всех остальных доказательств вины вашего клиента — слабых и косвенных — прокурор переходит к своему козырю, отпечатку пальца. Прокурор рассказывает присяжным, как именно компьютер сопоставляет отпечатки пальцев, и завершает свое выступление словами: «Нет абсолютно никаких шансов случайного совпадения настолько идентичных отпечатков».

Вы опровергаете его заявление: «По вашим словам, нет абсолютно никаких шансов настолько точного совпадения. Но так не бывает. В каждом тесте есть по крайней мере небольшой шанс ошибки». — «Конечно, — уступает он, — в принципе, тесты могут ошибаться. Но на практике шанс, что это случится, нулевой. Исследования ФБР показывают, что существует один шанс на десять миллионов, что два отпечатка совпадут настолько же точно. Один на десять миллионов — тут нет места сомнениям!»

Именно этого вы и ждали. Вы обращаетесь к присяжным и рисуете таблицу на три строки и два столбца на большом листе бумаги. Выглядит она примерно вот так.

«Я думаю, все мы согласны, что это преступление было кем-то совершено. И давайте также предположим, что отпечатки виновного есть в базе данных. Может быть, и нет, — обращаетесь вы к прокурору, — но это ослабит ваши доказательства. Так что давайте предположим, что они есть в базе». Прокурор кивает. «Тогда таблица должна выглядеть примерно вот так». Вы заполняете верхний ряд большим красным маркером.

Повернувшись к прокурору, вы интересуетесь: «Сколько человек включены в эту вашу базу ФБР?» Он перебивает вас: «Возражение, Ваша честь! Какое отношение это имеет к делу?» — «В этом и есть вся суть дела, — объясняете вы. — Я убежден, что объясню это все в течение следующих нескольких минут». — «Возражение отклонено». Сторона обвинения признается, что, если учесть все отпечатки пальцев преступников в США, все отпечатки гражданских лиц, полученные при проверке их биографий, и все отпечатки из базы Администрации транспортной безопасности, в базе представлено приблизительно пятьдесят миллионов американцев. И конечно, большинство отпечатков в базе не совпадают с тем, что найден на раме.

«Итак, теперь мы можем заполнять таблицу дальше», — говорите вы и вписываете число 50 000 000 в нижний правый угол.

Теперь вы указываете на нижний левый угол (это невиновные люди, чьи отпечатки тем не менее совпадут с найденным) и спрашиваете: «Как вы думаете, что нужно вписать сюда?»

Вы смотрите прямо на прокурора. «Вы сказали, что существует один шанс на десять миллионов, что алгоритм нашел неправильное совпадение. Это значит, что среди пятидесяти миллионов человек в этой базе должно быть примерно пять, чьи отпечатки совпадают с найденным и на месте преступления. Так что давайте заполним таблицу следующим образом»

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Найденная рыбаками на дне Тайваньского пролива древняя челюсть принадлежала денисовцу Найденная рыбаками на дне Тайваньского пролива древняя челюсть принадлежала денисовцу

Кусок нижней челюсти архаичного человека Penghu-1 принадлежал денисовцу

N+1
Виновата ли я? Виновата ли я?

Почему мы чувствуем вину и стыд, даже когда вроде как не сделали ничего плохого?

Новый очаг
Нашу ближайшую соседку галактику Малое Магелланово Облако рвет на части Нашу ближайшую соседку галактику Малое Магелланово Облако рвет на части

Притяжение Большого Магелланова Облака может разрывать Малое Облако на части

ТехИнсайдер
Директор Фонда борьбы с лейкемией — об умении помогать осознанно Директор Фонда борьбы с лейкемией — об умении помогать осознанно

Почему фонды — это не про страх и смерть, а про жизнь и счастье?

РБК
Слушаем и не осуждаем: чем полезны сплетни на работе и когда они вредят коллективу Слушаем и не осуждаем: чем полезны сплетни на работе и когда они вредят коллективу

Как сплетни и слухи могут влиять на рабочий процесс и настроения в офисе

Forbes
В древнеегипетском Гелиополе раскопали гранитные блоки времен фараона Хуфу В древнеегипетском Гелиополе раскопали гранитные блоки времен фараона Хуфу

Результаты раскопок в Каире на территории древнего города Гелиополя

N+1
«Ноев ковчег» для семян: как устроено «хранилище Судного дня» «Ноев ковчег» для семян: как устроено «хранилище Судного дня»

Стратегический запас семян на черный день — идея не новая

Вокруг света
5 фантастических книжных новинок, которые стоит прочесть этим летом 5 фантастических книжных новинок, которые стоит прочесть этим летом

Миры, созданные писателями, рано или поздно становятся реальностью

ТехИнсайдер
Как замедлить процесс старения, или почему вам не нужно “трястись над здоровьем” Как замедлить процесс старения, или почему вам не нужно “трястись над здоровьем”

Возможно, чтобы жить дольше, нашему организму нужно больше стресса!

ТехИнсайдер
Улыбайся, малыш! Улыбайся, малыш!

Как предотвратить появление кариеса у детей

Лиза
Интервью музыкантов «4 позиции Бруно» — первое за шесть лет Интервью музыкантов «4 позиции Бруно» — первое за шесть лет

«4 позиции Бруно» — о новом альбоме, вдохновении и надругательстве над музыкой

СНОБ
Директор московской «Ночлежки» Дарья Байбакова: «На чувстве вины далеко не уедешь» Директор московской «Ночлежки» Дарья Байбакова: «На чувстве вины далеко не уедешь»

Как социальный проект «Ночлежка» стал бизнесом

СНОБ
Втулки стабилизатора: для чего нужны, когда и как менять Втулки стабилизатора: для чего нужны, когда и как менять

Что укажет на износ втулок стабилизатора, легко ли их поменять своими силами?

РБК
Как быстро снять отек лица: 8 работающих способов Как быстро снять отек лица: 8 работающих способов

Без паники, все под контролем! Рассказываем, как быстро снять отеки с лица

VOICE
Как победить храп соседа по купе и другие секреты выживания в поезде Как победить храп соседа по купе и другие секреты выживания в поезде

Как сделать путешествие на поезде идиллическим?

Maxim
Чтение выходного дня: как начиналась Февральская революция? Глава из книги Сергея Минаева «Бунт и смута на Руси» Чтение выходного дня: как начиналась Февральская революция? Глава из книги Сергея Минаева «Бунт и смута на Руси»

Отрывок из книги «Бунт и смута на Руси» — о февральской революции

Правила жизни
Баловали, но держали в строгости: как воспитывали будущую королеву Елизавету II Баловали, но держали в строгости: как воспитывали будущую королеву Елизавету II

Детство королевы Елизаветы II было не таким, как у ее сверстников

Вокруг света
6 хитростей, которые помогут сделать белье мягким без кондиционера 6 хитростей, которые помогут сделать белье мягким без кондиционера

Подручные тоже смогут сделать вещи мягкими и без всякой небезопасной химии!

Лиза
Защита от инфляции и бонус для миллениала: кто и где платит зарплату в криптовалюте Защита от инфляции и бонус для миллениала: кто и где платит зарплату в криптовалюте

Зачем использовать криптовалюту в качестве зарплаты?

Forbes
«Это как пойти в банкомат, снять деньги и сжечь их». Почему малому бизнесу не нужна собственная торговая марка «Это как пойти в банкомат, снять деньги и сжечь их». Почему малому бизнесу не нужна собственная торговая марка

Почему собственная торговая марка — беда для небольших компаний

Inc.
Взгляд изнутри Взгляд изнутри

Эндоскопические исследования стали золотым стандартом в диагностике заболеваний

Здоровье
Кто придумал заправлять одеяло под матрас и главное зачем? Ответ вас удивит Кто придумал заправлять одеяло под матрас и главное зачем? Ответ вас удивит

Заправлять одеяло под матрас — это традиция, пришедшая из Франции и Англии

ТехИнсайдер
«Живите как горностай»: совет, проверенный временем «Живите как горностай»: совет, проверенный временем

Хватайтесь зубами за свое предназначение и не отпускайте его

Psychologies
Что нельзя говорить инспектору ГИБДД: откровения полицейских Что нельзя говорить инспектору ГИБДД: откровения полицейских

Инспекторы ГИБДД объяснили, как водителям быстрее пройти проверку

РБК
На троне не все дома: 5 правителей, у которых были проблемы с психикой На троне не все дома: 5 правителей, у которых были проблемы с психикой

Явные психические отклонения имели многие правители

Вокруг света
Зеленые модники. 7 стильных растений для дома Зеленые модники. 7 стильных растений для дома

Какие растения сейчас на пике популярности?

Лиза
Для чего древние цивилизации использовали календари? 5 невероятных фактов о времени Для чего древние цивилизации использовали календари? 5 невероятных фактов о времени

Факты, связанные со временем, которые вы точно не знали

ТехИнсайдер
Почему мы забываем о сексе и как его вернуть в семейную жизнь Почему мы забываем о сексе и как его вернуть в семейную жизнь

Почему в семейной жизни всегда нужно искать время для секса?

Maxim
Что такое пептидная косметика и как она работает Что такое пептидная косметика и как она работает

Как пептиды улучшают состояние кожи?

РБК
Изжога, диабет и еще 4 проблемы со здоровьем, превращающие пиво в яд Изжога, диабет и еще 4 проблемы со здоровьем, превращающие пиво в яд

6 проблем со здоровьем, при которых стоит отказаться от пива

Psychologies
Открыть в приложении