Отрывок из книги «Полный бред! Скептицизм в мире больших данных»

ForbesКультура

Бывает ли безвредный алкоголь, что такое зомби-статистика и когда можно верить числам

Фото Getty Images

«Числа идеально подходят для изложения чуши. Они кажутся объективными, но ими легко манипулировать, чтобы рассказывать нужную историю», — говорят главные в мире эксперты по чуши, которые придумали университетский курс о том, как противостоять фейкам и дезинформации. Кто и как использует числа, чтобы морочить нам голову и когда не надо верить процентам и статистике.

Доктор биологических наук Карл Бергстром борется с фейками и враньем на протяжение многих лет. Как ученый он специализируется на механизмах распространения информации в рамках биологических и социальных систем — от внутриклеточного контроля экспрессии генов до дезинформации в социальных сетях. В период пандемии он боролся с антиваксерами, а недавно осудил подход Илона Маска к подсчету фейковых аккаунтов в Twitter как ненаучный. По его словам, выборка из 100 подписчиков, на основе которой Маск намерен оценить пропорцию настоящих аккаунтов в соцсети, не может считаться репрезентативной — это влечет за собой систематическую ошибку отбора. Но по экспертной оценке Бергстрома, скорее всего, Маск всех троллит.

В Вашингтонском университете Бергстром вместе с другим биологом Джевином Уэстом ведет курс под названием Calling Bullshit («Как распознать вранье»), задача которого — научить студентов скептически относиться к информации и уметь оценивать ее правдивость или убедительно доказывать ее фейковость. Об этом актуальном и полезном навыке они написали одноименную с курсом книгу, которая мае выходит на русском языке под названием «Полный бред! Скептицизм в мире больших данных» в издательстве «Манн, Иванов и Фербер». Forbes публикует отрывок.

«Вера людей в числа невероятно сильна. Скептики заявляют, что они «просто хотят увидеть данные», или требуют, чтобы им показали «исходные данные», или настаивают на том, что «показатели должны говорить сами за себя». Нас убеждают, что «данные никогда не врут». Но эта точка зрения может быть опасной. Даже если величины или числа верны, их всё равно можно использовать, чтобы морочить голову. Чтобы числа были понятными, они должны находиться в уместном контексте. Их нужно демонстрировать так, чтобы нам было доступно честное сравнение.

Мы полагаемся на приблизительные оценки, когда рассматриваем такие показатели, как, например, рост взрослого человека в определенной стране. Мужчины из Нидерландов считаются самыми высокими в мире — в среднем 183 сантиметра. Но чтобы получить эти данные, не измеряли всех жителей страны и не вычисляли среднее всех полученных величин. Вместо этого исследователи использовали случайную выборку местных мужчин, измерили тех, кто в нее попал, и экстраполировали выводы на все население. Если бы кто-то измерил полдюжины мужчин и вычислил их средний рост, только по случайности результат мог бы получиться неверным. Предположим, среди них некоторые были необычайно высокими. Это называют ошибкой выборки. К счастью, обширная выборка, как правило, позволяет выровнять отклонения, так что такая ошибка минимально влияет на результат.

Проблемы могут возникнуть и с процедурой измерения. Допустим, исследователи попросили участников сообщить о своем росте, но мужчины склонны завышать цифры, причем мужчины маленького роста делают это чаще, чем высокие.

Другой источник ошибки — предвзятость самой выборки — еще опаснее. Предположим, вы решили определить рост людей, отправились на местную баскетбольную площадку и стали измерять игроков. Баскетболисты, как правило, выше среднего роста, так что ваша выборка будет нерепрезентативной для населения в целом и в итоге значение окажется слишком высоким.

Большинство ошибок такого рода не настолько очевидны. Есть много хитроумных подходов, из-за которых выборка перестает характеризовать популяцию. Сводная статистика может быть удобным способом обобщать информацию, но, если она некорректна, вы легко введете свою аудиторию в заблуждение.

В расчеты и факты, которые кажутся совершенно очевидными, ошибки закрадываются по разным причинам. Можно запутаться в числах. Можно использовать слишком маленькую выборку, которая некорректно отражает особенности всей группы. Некорректными могут оказаться методики, с помощью которых мы выводим числа из иной информации. И наконец, числа могут просто быть полной чушью, выдуманной с нуля в попытке придать убедительность жалким аргументам. Мы должны помнить об этом, когда нам что-то доказывают с помощью численных показателей. Говорят, что цифры никогда не лгут, но следует помнить, что они часто вводят в заблуждение.

Зловредные проценты

Двенадцатая глава книги Карла Сагана 1996 года «Мир, полный демонов» называется «Тонкое искусство снимать лапшу с ушей». В ней автор разносит мир рекламы, атакующий нас ошеломительными, но бессмысленными фактами и цифрами. Саган подчеркивает ту же проблему, которой мы касаемся в этой главе: числа легко сбивают людей с толку, и рекламодатели многие десятилетия пользуются этим, чтобы убеждать. «От вас не ждут вопросов, — пишет Саган. — Не думайте. Покупайте».

Печально известный заголовок Breitbart сходным образом лишил читателей возможности провести осмысленное сопоставление. В этом впечатляющем образце нагнетания паники сообщалось, что 2139 потенциальных бенефициаров законопроекта DREAM (The Development, Relief and Education for Alien Minors Act — законопроект, согласно которому дети нелегальных мигрантов, получившие высшее образование или отслужившие в армии США, могут получить вид на жительство в США) — взрослые, нелегально прибывшие в США в детском возрасте — были осуждены или обвинены в преступлениях, совершенных против американцев. Число кажется пугающим. Но, конечно, закон DREAM относился к большому числу людей: соответствующий статус имели одновременно около 700 000 человек и еще около 800 000 получили его в какой-то момент до отмены программы. Это означает, что только 0,3% получателей такого статуса — то есть менее одного из 300 — обвинялись в преступлениях против американцев.

Уже лучше, но как это число соотносится с аналогичными показателями, касающимися граждан Америки? Если 0,75% американцев сидят за решеткой, получается, что граждане США в два раза чаще оказываются заключенными или обвиненными в совершении преступления, чем дети нелегальных мигрантов, претендующие на гражданство? Около 8,6% американских граждан были обвинены в преступлении в какой-то момент свой жизни, так и тут потенциальные бенефициары программы DREAM выглядят неплохо.

Конечно, они моложе и в целом могли просто не успеть совершить преступление до получения статуса, потому что у них было на это меньше времени, чем у среднего американца. Но оказывается, что 30% граждан США за какие-нибудь правонарушения (не считая дорожно-транспортных) арестовывались уже к 23 годам. Даже если мы предположим, что числа Breitbart корректны, издание представило их без необходимой информации, которая нужна читателю, чтобы поместить их в контекст.

Таким образом, демонстрируя исходные числа, можно заставить сравнительно небольшое количество выглядеть большим. Мы помещаем число в контекст с помощью выражения его в процентах. Конечно, проценты являются ценным инструментом сравнения. Но существуют различные способы затруднять необходимые сравнения и в процентах. Например, проценты могут заставить крупные показатели выглядеть менее значительными.

В своем блоге вице-президент по поиску Google признал, что его компания сталкивается с проблемами фейковых новостей, дезинформации и другого неуместного контента: «Наши алгоритмы помогают выявлять надежные источники среди сотен миллиардов страниц в нашем поисковом индексе. Однако стало очевидным, что небольшая часть запросов в нашем повседневном трафике (около 0,25%) выдает непристойные или откровенно вводящие в заблуждение результаты, а это не то, что нужно людям». Тут можно отметить две вещи. В первую очередь нам демонстрируют огромное, но практически не имеющее к нам отношения число как бы в роли контекста. «Сотни миллиардов страниц в нашем поисковом индексе». Этому огромному числу противопоставлено крошечное 0,25%. Но сотни миллиардов не имеют к этому особого отношения: это количество проиндексированных страниц, а не число поисковых запросов. Неважно, проиндексированы десять тысяч или сотни миллиардов страниц. Если 0,25% запросов в Google ведут не туда, у вас один на четыре сотни шанс получить чушь в результате поиска.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Горе от интеллекта: как хайп вокруг ИИ вредит IT-продуктам Горе от интеллекта: как хайп вокруг ИИ вредит IT-продуктам

В каких случаях ИИ навредит продукту, а в каких — поможет

Forbes
Где золото роют в горах: как работает гринфилд-проект Владимира Потанина в Забайкалье Где золото роют в горах: как работает гринфилд-проект Владимира Потанина в Забайкалье

Быстринское месторождение открыли еще в XIX веке: как добывают золото

Forbes
Славная традиция: когда и зачем был построен пряничный домик Славная традиция: когда и зачем был построен пряничный домик

Зачем на новый год собирают пряничные домики?

ТехИнсайдер
Пропущенный рейд может стоить жизни редкому животному: 8 причин «не ставить на паузу» охрану природы Пропущенный рейд может стоить жизни редкому животному: 8 причин «не ставить на паузу» охрану природы

Здоровая экосистема планеты — залог нашего существования

Вокруг света
Как говорить, чтобы дети слушали Как говорить, чтобы дети слушали

Как научиться вести диалог с ребенком

kiozk originals
Вызывающий белую гниль паразитический гриб заблокировал защитные механизмы растений Вызывающий белую гниль паразитический гриб заблокировал защитные механизмы растений

Как паразитические грибы влияют на растения?

N+1
Почему не нужно бояться родов и какие методики применять для борьбы со страхом Почему не нужно бояться родов и какие методики применять для борьбы со страхом

Как перестать бояться родов и помочь телу сделать его работу

VOICE
Как выбрать одежду и экипировку для летних пробежек Как выбрать одежду и экипировку для летних пробежек

Как сделать пробежки в жаркое время года удобными и безопасными

Maxim
Археологи обнаружили в Египте 85 древних гробниц и руины храма богини Исиды Археологи обнаружили в Египте 85 древних гробниц и руины храма богини Исиды

Археологи во время работ обнаружили руины храма богини Исиды

N+1
5 способов почувствовать себя счастливее прямо сейчас 5 способов почувствовать себя счастливее прямо сейчас

Мы можем испытать прилив счастья в любой момент

Psychologies
Как самолеты взлетают Как самолеты взлетают

Как устроены самолеты с вертикальными взлетом и посадкой

ТехИнсайдер
Пылевые вихри и восходящие ветра оказались ответственны за пылевую дымку на Марсе Пылевые вихри и восходящие ветра оказались ответственны за пылевую дымку на Марсе

Ветра поднимают пыль на Марсе

N+1
В это сложно поверить: 5 диких ритуалов древних племен, которые проводятся до сих пор В это сложно поверить: 5 диких ритуалов древних племен, которые проводятся до сих пор

На одной планете с нами живут люди, далекие от современных забот

ТехИнсайдер
Что делают суперуспешные люди рано утром? Что делают суперуспешные люди рано утром?

Что общего у Марка Цукерберга, Анны Винтур и Тима Кука?

Psychologies
В чем сила? В чем сила?

Куда отправиться прямо сейчас, чтобы вернуться домой по-настоящему отдохнувшими?

Psychologies
Дело Эрлиха — Альтера Дело Эрлиха — Альтера

80 лет назад в Советском Союзе создали Еврейский антифашистский комитет

Дилетант
«Теория сексуальной экономики»: почему одних женщин раздражает откровенная одежда на других «Теория сексуальной экономики»: почему одних женщин раздражает откровенная одежда на других

Как и почему срабатывает внутриполовая конкуренция?

Psychologies
Кристина Кретова и Игорь Цвирко: Кристина Кретова и Игорь Цвирко:

Кристина Кретова и Игорь Цвирко рассказывают о балете и своей любви

Караван историй
Как ученые из университета МИСиС делают «всепогодные» солнечные батареи из перовскита Как ученые из университета МИСиС делают «всепогодные» солнечные батареи из перовскита

Специалисты НИТУ МИСиС разработали солнечные батареи для любой погоды

СНОБ
Как полковник австро-венгерской армии шпионил в пользу Российской империи Как полковник австро-венгерской армии шпионил в пользу Российской империи

О шпионаже австро-венгерского полковника в пользу Российской империи

СНОБ
Лечение без рецепта Лечение без рецепта

Иногда на помощь официальной медицине приходят нетрадиционные методы

Лиза
Подозрительно выгодное предложение: как не ошибиться с выбором подрядчика в кризис Подозрительно выгодное предложение: как не ошибиться с выбором подрядчика в кризис

На что обратить внимание при выборе нового партнера

Forbes
Отрывок из нового романа Алексея Сальникова «Оккульттрегер» Отрывок из нового романа Алексея Сальникова «Оккульттрегер»

Роман не теряет трезвый взгляд на российскую действительность

СНОБ
Кого считать мертвым: как менялись представления о границе между жизнью и смертью Кого считать мертвым: как менялись представления о границе между жизнью и смертью

Современная медицина поставила под сомнение привычную черту смерти

Вокруг света
Без имени на бумаге: как Марион Махони Гриффин повлияла на архитектуру Австралии Без имени на бумаге: как Марион Махони Гриффин повлияла на архитектуру Австралии

Как Марион Махони Гриффин хотела построить рай на Земле

Forbes
Номер по абонементу: зачем отели тестируют систему подписки на свои услуги Номер по абонементу: зачем отели тестируют систему подписки на свои услуги

Зачем отели по всему миру вводят системы подписки на номера и услуги

Forbes
Кто виноват и что делать: мужское бесплодие и как его определить Кто виноват и что делать: мужское бесплодие и как его определить

Можно ли что-то сделать, если бесплоден мужчина?

VOICE
Люди переоценили количество негатива в прошлых романтических отношениях Люди переоценили количество негатива в прошлых романтических отношениях

Люди часто оценивают себя в прошлом хуже, чем в настоящем, даже если это не так

N+1
Топ-10 кондиционеров для квартиры: рейтинг лучших 2022 Топ-10 кондиционеров для квартиры: рейтинг лучших 2022

Какой кондиционер лучше выбрать для квартиры?

CHIP
Не только Первомай: откуда взялась традиция праздновать начало мая Не только Первомай: откуда взялась традиция праздновать начало мая

Традиция праздновать окончательную победу лета над морозами стара как мир

Вокруг света
Открыть в приложении