Отрывок из книги «Полный бред! Скептицизм в мире больших данных»

N+1Наука

«Полный бред! Скептицизм в мире больших данных». Как относиться к получаемой информации критически

Манн, Иванов и Фербер, научно-популярные книгоиздатели

Если кто-то подкрепляет утверждения затейливыми терминами, цифрами и красивыми графиками, это еще не значит, что ему можно доверять. Статистика и язык точных наук могут быть всего лишь инструментами, призванными скрыть обман. Тот, кто умеет анализировать и перепроверять информацию, скорее всего, заметит подвох — остальные рискуют попасться в ловушку. В книге «Полный бред! Скептицизм в мире больших данных» (издательство «Манн, Иванов и Фербер»), переведенной на русский Елизаветой Пономаревой, ученые Карл Бергстром и Джевин Уэст рассказывают, как распознать чушь (в оригинале — bullshit) и почему для этого совсем не обязательно быть специалистом, а достаточно воспользоваться обыкновенной логикой. Предлагаем вам ознакомиться с фрагментом, посвященным «ошибке прокурора» и уровню значимости (p-value).

Ошибка прокурора

Как мы видели, в большинстве научных исследований ищут закономерности в данных, позволяющие делать выводы о мире. Но как отличить закономерность от случайного шума? И как определить, насколько она значима? Существует несколько способов это сделать, и самый распространенный — это использование р-значения. Грубо говоря, р-значение указывает, насколько вероятно, что наблюдаемая закономерность возникла по чистой случайности. Если это маловероятно, то мы можем сказать, что результат статистически значим. Но что это на самом деле означает и как нам трактовать р-значение? Мы ответим на эти вопросы с помощью короткой истории.

Представьте, что вы известный адвокат, который защищает скромного биолога, обвиняемого в самом поразительном похищении предмета искусства в современной истории.

Это сенсационное преступление. Богатая собирательница отправила частную коллекцию из тридцати шедевров европейского искусства на охраняемом поезде из своего особняка в Санта-Кларе в аукционный дом в Нью-Йорке. Когда поезд достиг пункта назначения, коробки отнесли в аукционный дом для распаковки. Путешествие прошло без происшествий, и к коробкам, на первый взгляд, никто не прикасался. Но, к всеобщему ужасу, четыре самые ценные картины были вырезаны из рам и исчезли! Ни полиция, ни страховая компания не нашли ни единой улики, не считая единственного отпечатка пальца на раме одной из пропавших работ. Украденные шедевры так никогда и не отыскали.

При отсутствии каких-либо иных наметок полиция прогнала от печаток пальца через огромную базу данных ФБР и нашла совпадение — отпечаток вашего клиента. (Он сдал свои отпечатки Администрации транспортной безопасности в обмен на возможность проходить досмотр в аэропорту, не снимая ботинок.) На допросе выяснилось, что у вашего клиента нет алиби. Он утверждает, что ни с кем не контактировал две недели, пока выслеживал окольцованную куропатку в горах Высокая Сьерра в рамках научного проекта.

Несмотря на отсутствие алиби, вы уверены, что ваш клиент не может быть виновен. Он всего лишь застенчивый ученый, а не хладнокровный похититель шедевров. У него уже есть два гранта NSF на исследование размножения куропаток, и, похоже, он не нуждается в дополнительных источниках дохода. К тому же, насколько вы заметили, он ни черта не понимает в искусстве; да что там, он считает, что Донателло — это черепашка-ниндзя.

Тем не менее начинается судебный процесс, и вы сталкиваетесь с блестящей молодой звездой прокуратуры. После описания всех остальных доказательств вины вашего клиента — слабых и косвенных — прокурор переходит к своему козырю, отпечатку пальца. Прокурор рассказывает присяжным, как именно компьютер сопоставляет отпечатки пальцев, и завершает свое выступление словами: «Нет абсолютно никаких шансов случайного совпадения настолько идентичных отпечатков».

Вы опровергаете его заявление: «По вашим словам, нет абсолютно никаких шансов настолько точного совпадения. Но так не бывает. В каждом тесте есть по крайней мере небольшой шанс ошибки». — «Конечно, — уступает он, — в принципе, тесты могут ошибаться. Но на практике шанс, что это случится, нулевой. Исследования ФБР показывают, что существует один шанс на десять миллионов, что два отпечатка совпадут настолько же точно. Один на десять миллионов — тут нет места сомнениям!»

Именно этого вы и ждали. Вы обращаетесь к присяжным и рисуете таблицу на три строки и два столбца на большом листе бумаги. Выглядит она примерно вот так.

«Я думаю, все мы согласны, что это преступление было кем-то совершено. И давайте также предположим, что отпечатки виновного есть в базе данных. Может быть, и нет, — обращаетесь вы к прокурору, — но это ослабит ваши доказательства. Так что давайте предположим, что они есть в базе». Прокурор кивает. «Тогда таблица должна выглядеть примерно вот так». Вы заполняете верхний ряд большим красным маркером.

Повернувшись к прокурору, вы интересуетесь: «Сколько человек включены в эту вашу базу ФБР?» Он перебивает вас: «Возражение, Ваша честь! Какое отношение это имеет к делу?» — «В этом и есть вся суть дела, — объясняете вы. — Я убежден, что объясню это все в течение следующих нескольких минут». — «Возражение отклонено». Сторона обвинения признается, что, если учесть все отпечатки пальцев преступников в США, все отпечатки гражданских лиц, полученные при проверке их биографий, и все отпечатки из базы Администрации транспортной безопасности, в базе представлено приблизительно пятьдесят миллионов американцев. И конечно, большинство отпечатков в базе не совпадают с тем, что найден на раме.

«Итак, теперь мы можем заполнять таблицу дальше», — говорите вы и вписываете число 50 000 000 в нижний правый угол.

Теперь вы указываете на нижний левый угол (это невиновные люди, чьи отпечатки тем не менее совпадут с найденным) и спрашиваете: «Как вы думаете, что нужно вписать сюда?»

Вы смотрите прямо на прокурора. «Вы сказали, что существует один шанс на десять миллионов, что алгоритм нашел неправильное совпадение. Это значит, что среди пятидесяти миллионов человек в этой базе должно быть примерно пять, чьи отпечатки совпадают с найденным и на месте преступления. Так что давайте заполним таблицу следующим образом»

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

«Турецкие войны России: Царская армия и балканские народы в XIX столетии» «Турецкие войны России: Царская армия и балканские народы в XIX столетии»

Каким было отношение населения Румелии к российской армии

N+1
Механизмы зрения: наука и жизнь Механизмы зрения: наука и жизнь

С чего начинается зрение?

Наука и жизнь
«Алхимики» на БАК все-таки превратили свинец в золото, но получилось очень мало «Алхимики» на БАК все-таки превратили свинец в золото, но получилось очень мало

Мечта средневековых алхимиков сбылась: ученые трансмутировали свинец в золото

ТехИнсайдер
«Поговорите открыто о своих чувствах на работе» «Поговорите открыто о своих чувствах на работе»

Александр Барсуков — о десяти способах защитить сотрудников от выгорания

РБК
Как и зачем одна женщина записала и сохранила более 30 лет передач на ТВ в США Как и зачем одна женщина записала и сохранила более 30 лет передач на ТВ в США

Архив Мэрион Стокс — это уникальная хроника истории

ТехИнсайдер
Вопрос психологу: как пережить расставание? Вопрос психологу: как пережить расставание?

Как пережить расставание с наименьшими потерями? Как отпустить человека?

Правила жизни
Драконы смерти: в Аргентине раскопали нетронутый скелет ящера с размахом крыльев 9 метров Драконы смерти: в Аргентине раскопали нетронутый скелет ящера с размахом крыльев 9 метров

Это крупнейший из птерозавров, когда-либо найденных в Южной Америке

Вокруг света
Максим Винарский Максим Винарский

Биолог Максим Винарский выпустил книгу о последнем общем предке всех организмов

Собака.ru
Танатофобия: что такое страх смерти и как с ним бороться Танатофобия: что такое страх смерти и как с ним бороться

Почему у некоторых людей любое упоминание смерти вызывает панику и тревожность?

РБК
Как распознать тирана в отношениях: как они ведут себя в семье Как распознать тирана в отношениях: как они ведут себя в семье

Психолог назвала признаки домашнего тирана и рассказала, как избежать опасности

Psychologies
Максим Стоянов: Максим Стоянов:

Интервью со звездой сериала «Шифр» Максимом Стояновым

Коллекция. Караван историй
Как нужно питаться до и после тренировки: практические советы Как нужно питаться до и после тренировки: практические советы

Правильное питание поможет быстрее восстанавливаться после тренировок

ТехИнсайдер
Вы расстались: как улучшить сценарий будущих отношений? Вы расстались: как улучшить сценарий будущих отношений?

Как не попасть в капкан повторяющегося сценария отношений

Psychologies
«Красный барон»: история самого известного хот-рода в мире «Красный барон»: история самого известного хот-рода в мире

Хот-роддинг — автомобильное искусство, признанное и уважаемое

Maxim
Как справиться с гневом: 6 способов людей с высоким эмоциональным интеллектом Как справиться с гневом: 6 способов людей с высоким эмоциональным интеллектом

Как высокий эмоциональный интеллект спасает нас в конфликтных ситуациях?

Psychologies
30 лучших фэнтези-фильмов всех времен 30 лучших фэнтези-фильмов всех времен

Поставьте реальность на паузу и позвольте себе раствориться в фантастике

Правила жизни
У нептичьих динозавров впервые обнаружили пупок У нептичьих динозавров впервые обнаружили пупок

У небольших растительноядных динозавров был пупок

N+1
Очень московское собрание: как коллекция братьев Морозовых долго возвращалась домой Очень московское собрание: как коллекция братьев Морозовых долго возвращалась домой

Многолетняя эпопея по объединению собрания братьев Морозовых

Forbes
Ресторатор Борис Зарьков: «Дальше очень просто – жизнь продолжается. Вы находитесь “здесь”» Ресторатор Борис Зарьков: «Дальше очень просто – жизнь продолжается. Вы находитесь “здесь”»

Ресторатор Борис Зарьков – пат в шахматах, уход Michelin и «голые короли

СНОБ
Не всегда полезны для здоровья: 7 самых травмоопасных видов спорта Не всегда полезны для здоровья: 7 самых травмоопасных видов спорта

Выбирая вид спорта по душе, стоит помнить о возможных рисках

Вокруг света
«Дело Финляндии — наше дело» «Дело Финляндии — наше дело»

В 1939–1940 годах театром военных действий снова стала Финляндия

Дилетант
«Теорема зонтика, или Искусство правильно смотреть на мир через призму математики». Как поменять взгляд на повседневность с помощью математики «Теорема зонтика, или Искусство правильно смотреть на мир через призму математики». Как поменять взгляд на повседневность с помощью математики

Отрывок из книги «Теорема зонтика» — о том, как иначе смотреть на мир

N+1
Что делать, если у вас заложило уши: лучшие способы справиться с проблемой Что делать, если у вас заложило уши: лучшие способы справиться с проблемой

Как справиться с заложенностью в ухе?

ТехИнсайдер
Мне просто спросить Мне просто спросить

Онлайн сервис «Просто спросить», где помогают больным раком

СНОБ
Экспресс-тест: тиран ли ты? Экспресс-тест: тиран ли ты?

Сколько характерных признаков тирана ты обнаружишь у себя?

Maxim
Anna Asti: «Нет человека без страхов. Я переживала, что обо мне забудут» Anna Asti: «Нет человека без страхов. Я переживала, что обо мне забудут»

Сольная карьера Anna Asti началась громко и многообещающе

ЖАРА Magazine
Диета при панкреатите: что можно и нельзя есть. Советы экспертов Диета при панкреатите: что можно и нельзя есть. Советы экспертов

Какие ограничения панкреатит накладывает на привычный рацион?

РБК
5 «испорченных» природой мест, в которых мечтает побывать каждый путешественник 5 «испорченных» природой мест, в которых мечтает побывать каждый путешественник

На появление этих удивительных красот уходят тысячелетия

Вокруг света
Когда школа превращается в тюрьму: в прокат выходит бельгийская драма «Невидимый мир» Когда школа превращается в тюрьму: в прокат выходит бельгийская драма «Невидимый мир»

Лаура Вандель впервые показывает школьный буллинг глазами совсем маленьких детей

Forbes
Ты просто не поймешь это, пока молода: письмо австралийки берет за живое всех женщин, которым уже исполнилось 45 Ты просто не поймешь это, пока молода: письмо австралийки берет за живое всех женщин, которым уже исполнилось 45

Что изменится в твоей жизни с возрастом?

VOICE
Открыть в приложении