Отрывок из книги «Полный бред! Скептицизм в мире больших данных»

N+1Наука

«Полный бред! Скептицизм в мире больших данных». Как относиться к получаемой информации критически

Манн, Иванов и Фербер, научно-популярные книгоиздатели

Если кто-то подкрепляет утверждения затейливыми терминами, цифрами и красивыми графиками, это еще не значит, что ему можно доверять. Статистика и язык точных наук могут быть всего лишь инструментами, призванными скрыть обман. Тот, кто умеет анализировать и перепроверять информацию, скорее всего, заметит подвох — остальные рискуют попасться в ловушку. В книге «Полный бред! Скептицизм в мире больших данных» (издательство «Манн, Иванов и Фербер»), переведенной на русский Елизаветой Пономаревой, ученые Карл Бергстром и Джевин Уэст рассказывают, как распознать чушь (в оригинале — bullshit) и почему для этого совсем не обязательно быть специалистом, а достаточно воспользоваться обыкновенной логикой. Предлагаем вам ознакомиться с фрагментом, посвященным «ошибке прокурора» и уровню значимости (p-value).

Ошибка прокурора

Как мы видели, в большинстве научных исследований ищут закономерности в данных, позволяющие делать выводы о мире. Но как отличить закономерность от случайного шума? И как определить, насколько она значима? Существует несколько способов это сделать, и самый распространенный — это использование р-значения. Грубо говоря, р-значение указывает, насколько вероятно, что наблюдаемая закономерность возникла по чистой случайности. Если это маловероятно, то мы можем сказать, что результат статистически значим. Но что это на самом деле означает и как нам трактовать р-значение? Мы ответим на эти вопросы с помощью короткой истории.

Представьте, что вы известный адвокат, который защищает скромного биолога, обвиняемого в самом поразительном похищении предмета искусства в современной истории.

Это сенсационное преступление. Богатая собирательница отправила частную коллекцию из тридцати шедевров европейского искусства на охраняемом поезде из своего особняка в Санта-Кларе в аукционный дом в Нью-Йорке. Когда поезд достиг пункта назначения, коробки отнесли в аукционный дом для распаковки. Путешествие прошло без происшествий, и к коробкам, на первый взгляд, никто не прикасался. Но, к всеобщему ужасу, четыре самые ценные картины были вырезаны из рам и исчезли! Ни полиция, ни страховая компания не нашли ни единой улики, не считая единственного отпечатка пальца на раме одной из пропавших работ. Украденные шедевры так никогда и не отыскали.

При отсутствии каких-либо иных наметок полиция прогнала от печаток пальца через огромную базу данных ФБР и нашла совпадение — отпечаток вашего клиента. (Он сдал свои отпечатки Администрации транспортной безопасности в обмен на возможность проходить досмотр в аэропорту, не снимая ботинок.) На допросе выяснилось, что у вашего клиента нет алиби. Он утверждает, что ни с кем не контактировал две недели, пока выслеживал окольцованную куропатку в горах Высокая Сьерра в рамках научного проекта.

Несмотря на отсутствие алиби, вы уверены, что ваш клиент не может быть виновен. Он всего лишь застенчивый ученый, а не хладнокровный похититель шедевров. У него уже есть два гранта NSF на исследование размножения куропаток, и, похоже, он не нуждается в дополнительных источниках дохода. К тому же, насколько вы заметили, он ни черта не понимает в искусстве; да что там, он считает, что Донателло — это черепашка-ниндзя.

Тем не менее начинается судебный процесс, и вы сталкиваетесь с блестящей молодой звездой прокуратуры. После описания всех остальных доказательств вины вашего клиента — слабых и косвенных — прокурор переходит к своему козырю, отпечатку пальца. Прокурор рассказывает присяжным, как именно компьютер сопоставляет отпечатки пальцев, и завершает свое выступление словами: «Нет абсолютно никаких шансов случайного совпадения настолько идентичных отпечатков».

Вы опровергаете его заявление: «По вашим словам, нет абсолютно никаких шансов настолько точного совпадения. Но так не бывает. В каждом тесте есть по крайней мере небольшой шанс ошибки». — «Конечно, — уступает он, — в принципе, тесты могут ошибаться. Но на практике шанс, что это случится, нулевой. Исследования ФБР показывают, что существует один шанс на десять миллионов, что два отпечатка совпадут настолько же точно. Один на десять миллионов — тут нет места сомнениям!»

Именно этого вы и ждали. Вы обращаетесь к присяжным и рисуете таблицу на три строки и два столбца на большом листе бумаги. Выглядит она примерно вот так.

«Я думаю, все мы согласны, что это преступление было кем-то совершено. И давайте также предположим, что отпечатки виновного есть в базе данных. Может быть, и нет, — обращаетесь вы к прокурору, — но это ослабит ваши доказательства. Так что давайте предположим, что они есть в базе». Прокурор кивает. «Тогда таблица должна выглядеть примерно вот так». Вы заполняете верхний ряд большим красным маркером.

Повернувшись к прокурору, вы интересуетесь: «Сколько человек включены в эту вашу базу ФБР?» Он перебивает вас: «Возражение, Ваша честь! Какое отношение это имеет к делу?» — «В этом и есть вся суть дела, — объясняете вы. — Я убежден, что объясню это все в течение следующих нескольких минут». — «Возражение отклонено». Сторона обвинения признается, что, если учесть все отпечатки пальцев преступников в США, все отпечатки гражданских лиц, полученные при проверке их биографий, и все отпечатки из базы Администрации транспортной безопасности, в базе представлено приблизительно пятьдесят миллионов американцев. И конечно, большинство отпечатков в базе не совпадают с тем, что найден на раме.

«Итак, теперь мы можем заполнять таблицу дальше», — говорите вы и вписываете число 50 000 000 в нижний правый угол.

Теперь вы указываете на нижний левый угол (это невиновные люди, чьи отпечатки тем не менее совпадут с найденным) и спрашиваете: «Как вы думаете, что нужно вписать сюда?»

Вы смотрите прямо на прокурора. «Вы сказали, что существует один шанс на десять миллионов, что алгоритм нашел неправильное совпадение. Это значит, что среди пятидесяти миллионов человек в этой базе должно быть примерно пять, чьи отпечатки совпадают с найденным и на месте преступления. Так что давайте заполним таблицу следующим образом»

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

«Путеводитель по Средневековью: Мир глазами ученых, шпионов, купцов и паломников» «Путеводитель по Средневековью: Мир глазами ученых, шпионов, купцов и паломников»

Каково было совершать паломничество на борту галеи

N+1
Каким должен быть современный мужчина: россиянки назвали привлекающее их качество Каким должен быть современный мужчина: россиянки назвали привлекающее их качество

Наиболее популярные качества, которые женщины ценят в мужчинах

Psychologies
Среди отходов древнего Пантикапея распознали окаменелость миоценового тюленя Среди отходов древнего Пантикапея распознали окаменелость миоценового тюленя

Палеозоолог описал ископаемую лопатку миоценового тюленя Cryptophoca maeotica

N+1
Отдохните от себя: как быть свободным в свободное время Отдохните от себя: как быть свободным в свободное время

Три проверенных способа по-настоящему отдохнуть

VC.RU
Как сахар влияет на клеточное старение и разрушает коллаген: данные исследований Как сахар влияет на клеточное старение и разрушает коллаген: данные исследований

Почему сахар провоцирует воспаления клеток?

ТехИнсайдер
Никаких заторов Никаких заторов

7 продуктов, снижающих риск образования тромбов

Лиза
Борис Эйфман — о танце, Петербурге и заслуженном озарении Борис Эйфман — о танце, Петербурге и заслуженном озарении

Борис Эйфман — о том, почему из раза в раз обращается к текстам Достоевского

РБК
Повторить пройденное: как киноиндустрия 1990-х влияет на вкусы россиян сегодня Повторить пройденное: как киноиндустрия 1990-х влияет на вкусы россиян сегодня

По каким законам жил российский кинорынок в 1990-х

Forbes
Завтрак от громовой птицы: ученые раскрыли секрет древней австралийской яичницы Завтрак от громовой птицы: ученые раскрыли секрет древней австралийской яичницы

Аборигены Зеленого континента знали толк в сытной еде

Вокруг света
Церкви в самом невероятном месте на свете — Антарктиде Церкви в самом невероятном месте на свете — Антарктиде

На ледяном континенте умудрились построить часовни и русские, и американцы

Maxim
Лениться полезно: исследователи МГПУ выяснили, как изменилось отношение к безделью Лениться полезно: исследователи МГПУ выяснили, как изменилось отношение к безделью

Бездельничать плохо? Современная молодежь и студенты с этим не согласны

Psychologies
Ничего лишнего Ничего лишнего

Как стать бьюти-минималистом и не вестись на маркетинговые уловки

Новый очаг
Чем полезна жимолость: 7 фактов Чем полезна жимолость: 7 фактов

В чем именно польза жимолости

РБК
Чтение выходного дня: как начиналась Февральская революция? Глава из книги Сергея Минаева «Бунт и смута на Руси» Чтение выходного дня: как начиналась Февральская революция? Глава из книги Сергея Минаева «Бунт и смута на Руси»

Отрывок из книги «Бунт и смута на Руси» — о февральской революции

Правила жизни
Подвиг Огурцова: как всего три советских кавалериста захватили немецкую колонну из 33 единиц техники Подвиг Огурцова: как всего три советских кавалериста захватили немецкую колонну из 33 единиц техники

Василий Огурцов со своими товарищами смог захватить колонну немецких грузовиков

ТехИнсайдер
«И доктор не нужен»: ученые выяснили, какой фрукт надо есть диабетикам каждый день «И доктор не нужен»: ученые выяснили, какой фрукт надо есть диабетикам каждый день

Этот фрукт значительно снижает уровень сахара в крови

Вокруг света
Как стать сотрудником, которого не уволят даже в кризис Как стать сотрудником, которого не уволят даже в кризис

В меняющемся мире очень важно уметь быстро адаптироваться под новые реалии

Лиза
Властитель «страны грез»: жизнь и таинственная смерть баварского короля Людвига II Властитель «страны грез»: жизнь и таинственная смерть баварского короля Людвига II

Память о Людвиге II не умрет до тех пор, пока в горах будут стоять его замки

Вокруг света
Ближе к звездам: как Эмма Грид помогает семейству Кардашьян строить бизнес-империю Ближе к звездам: как Эмма Грид помогает семейству Кардашьян строить бизнес-империю

Как Эмма Грид заработала себе место в рейтинге богатейших женщин США

Forbes
Как правильно начать день, чтобы не сильно устать к вечеру: 8 важных советов Как правильно начать день, чтобы не сильно устать к вечеру: 8 важных советов

Как повысить продуктивность с самого утра?

Psychologies
Патронус, боггарт и Карта Мародеров: психологические уроки «Гарри Поттера» Патронус, боггарт и Карта Мародеров: психологические уроки «Гарри Поттера»

Почему история о «мальчике, который выжил» не перестает нас увлекать?

Psychologies
Агросектору поручено расти Агросектору поручено расти

Урожай в этом году может обеспечить позитивную динамику в сельском хозяйстве

Агроинвестор
Как нумерология помогает найти свой жизненный путь Как нумерология помогает найти свой жизненный путь

Значение нумерологии в жизни людей нельзя недооценивать

VOICE
Огламуренная чернуха. О российском сериале «Жиза» Огламуренная чернуха. О российском сериале «Жиза»

Стоит ли смотреть сериал о бандитской жизни детдомовцев «Жиза»

СНОБ
Как суд Джонни Деппа и Эмбер Херд может повлиять на культуру отмены? Как суд Джонни Деппа и Эмбер Херд может повлиять на культуру отмены?

Как суд Деппа и Херд повлияет на общественное сознание?

Правила жизни
Что нельзя говорить инспектору ГИБДД: откровения полицейских Что нельзя говорить инспектору ГИБДД: откровения полицейских

Инспекторы ГИБДД объяснили, как водителям быстрее пройти проверку

РБК
Гость из Японии или старожил русского бора? Гость из Японии или старожил русского бора?

Мацутаке — сосновый гриб или японский трюфель?

Наука и жизнь
Как понять, что человеку нужна психологическая помощь: признаки депрессии и других ментальных расстройств Как понять, что человеку нужна психологическая помощь: признаки депрессии и других ментальных расстройств

Когда нужно обращаться к специалисту, а не пускать ситуацию на самотек

ТехИнсайдер
«И будет рыдать земля: Как у индейцев отняли Америку» «И будет рыдать земля: Как у индейцев отняли Америку»

Отрывок из истории покорения Американского Запада

N+1
Из плохишей в зефирки: звезды, которых слава из оторв сделала милашками Из плохишей в зефирки: звезды, которых слава из оторв сделала милашками

Популярность должна была разбаловать этих звезд, но они стали белыми и пушистыми

VOICE
Открыть в приложении