Отрывок из книги «Полный бред! Скептицизм в мире больших данных»

ForbesКультура

Бывает ли безвредный алкоголь, что такое зомби-статистика и когда можно верить числам

Фото Getty Images

«Числа идеально подходят для изложения чуши. Они кажутся объективными, но ими легко манипулировать, чтобы рассказывать нужную историю», — говорят главные в мире эксперты по чуши, которые придумали университетский курс о том, как противостоять фейкам и дезинформации. Кто и как использует числа, чтобы морочить нам голову и когда не надо верить процентам и статистике.

Доктор биологических наук Карл Бергстром борется с фейками и враньем на протяжение многих лет. Как ученый он специализируется на механизмах распространения информации в рамках биологических и социальных систем — от внутриклеточного контроля экспрессии генов до дезинформации в социальных сетях. В период пандемии он боролся с антиваксерами, а недавно осудил подход Илона Маска к подсчету фейковых аккаунтов в Twitter как ненаучный. По его словам, выборка из 100 подписчиков, на основе которой Маск намерен оценить пропорцию настоящих аккаунтов в соцсети, не может считаться репрезентативной — это влечет за собой систематическую ошибку отбора. Но по экспертной оценке Бергстрома, скорее всего, Маск всех троллит.

В Вашингтонском университете Бергстром вместе с другим биологом Джевином Уэстом ведет курс под названием Calling Bullshit («Как распознать вранье»), задача которого — научить студентов скептически относиться к информации и уметь оценивать ее правдивость или убедительно доказывать ее фейковость. Об этом актуальном и полезном навыке они написали одноименную с курсом книгу, которая мае выходит на русском языке под названием «Полный бред! Скептицизм в мире больших данных» в издательстве «Манн, Иванов и Фербер». Forbes публикует отрывок.

«Вера людей в числа невероятно сильна. Скептики заявляют, что они «просто хотят увидеть данные», или требуют, чтобы им показали «исходные данные», или настаивают на том, что «показатели должны говорить сами за себя». Нас убеждают, что «данные никогда не врут». Но эта точка зрения может быть опасной. Даже если величины или числа верны, их всё равно можно использовать, чтобы морочить голову. Чтобы числа были понятными, они должны находиться в уместном контексте. Их нужно демонстрировать так, чтобы нам было доступно честное сравнение.

Мы полагаемся на приблизительные оценки, когда рассматриваем такие показатели, как, например, рост взрослого человека в определенной стране. Мужчины из Нидерландов считаются самыми высокими в мире — в среднем 183 сантиметра. Но чтобы получить эти данные, не измеряли всех жителей страны и не вычисляли среднее всех полученных величин. Вместо этого исследователи использовали случайную выборку местных мужчин, измерили тех, кто в нее попал, и экстраполировали выводы на все население. Если бы кто-то измерил полдюжины мужчин и вычислил их средний рост, только по случайности результат мог бы получиться неверным. Предположим, среди них некоторые были необычайно высокими. Это называют ошибкой выборки. К счастью, обширная выборка, как правило, позволяет выровнять отклонения, так что такая ошибка минимально влияет на результат.

Проблемы могут возникнуть и с процедурой измерения. Допустим, исследователи попросили участников сообщить о своем росте, но мужчины склонны завышать цифры, причем мужчины маленького роста делают это чаще, чем высокие.

Другой источник ошибки — предвзятость самой выборки — еще опаснее. Предположим, вы решили определить рост людей, отправились на местную баскетбольную площадку и стали измерять игроков. Баскетболисты, как правило, выше среднего роста, так что ваша выборка будет нерепрезентативной для населения в целом и в итоге значение окажется слишком высоким.

Большинство ошибок такого рода не настолько очевидны. Есть много хитроумных подходов, из-за которых выборка перестает характеризовать популяцию. Сводная статистика может быть удобным способом обобщать информацию, но, если она некорректна, вы легко введете свою аудиторию в заблуждение.

В расчеты и факты, которые кажутся совершенно очевидными, ошибки закрадываются по разным причинам. Можно запутаться в числах. Можно использовать слишком маленькую выборку, которая некорректно отражает особенности всей группы. Некорректными могут оказаться методики, с помощью которых мы выводим числа из иной информации. И наконец, числа могут просто быть полной чушью, выдуманной с нуля в попытке придать убедительность жалким аргументам. Мы должны помнить об этом, когда нам что-то доказывают с помощью численных показателей. Говорят, что цифры никогда не лгут, но следует помнить, что они часто вводят в заблуждение.

Зловредные проценты

Двенадцатая глава книги Карла Сагана 1996 года «Мир, полный демонов» называется «Тонкое искусство снимать лапшу с ушей». В ней автор разносит мир рекламы, атакующий нас ошеломительными, но бессмысленными фактами и цифрами. Саган подчеркивает ту же проблему, которой мы касаемся в этой главе: числа легко сбивают людей с толку, и рекламодатели многие десятилетия пользуются этим, чтобы убеждать. «От вас не ждут вопросов, — пишет Саган. — Не думайте. Покупайте».

Печально известный заголовок Breitbart сходным образом лишил читателей возможности провести осмысленное сопоставление. В этом впечатляющем образце нагнетания паники сообщалось, что 2139 потенциальных бенефициаров законопроекта DREAM (The Development, Relief and Education for Alien Minors Act — законопроект, согласно которому дети нелегальных мигрантов, получившие высшее образование или отслужившие в армии США, могут получить вид на жительство в США) — взрослые, нелегально прибывшие в США в детском возрасте — были осуждены или обвинены в преступлениях, совершенных против американцев. Число кажется пугающим. Но, конечно, закон DREAM относился к большому числу людей: соответствующий статус имели одновременно около 700 000 человек и еще около 800 000 получили его в какой-то момент до отмены программы. Это означает, что только 0,3% получателей такого статуса — то есть менее одного из 300 — обвинялись в преступлениях против американцев.

Уже лучше, но как это число соотносится с аналогичными показателями, касающимися граждан Америки? Если 0,75% американцев сидят за решеткой, получается, что граждане США в два раза чаще оказываются заключенными или обвиненными в совершении преступления, чем дети нелегальных мигрантов, претендующие на гражданство? Около 8,6% американских граждан были обвинены в преступлении в какой-то момент свой жизни, так и тут потенциальные бенефициары программы DREAM выглядят неплохо.

Конечно, они моложе и в целом могли просто не успеть совершить преступление до получения статуса, потому что у них было на это меньше времени, чем у среднего американца. Но оказывается, что 30% граждан США за какие-нибудь правонарушения (не считая дорожно-транспортных) арестовывались уже к 23 годам. Даже если мы предположим, что числа Breitbart корректны, издание представило их без необходимой информации, которая нужна читателю, чтобы поместить их в контекст.

Таким образом, демонстрируя исходные числа, можно заставить сравнительно небольшое количество выглядеть большим. Мы помещаем число в контекст с помощью выражения его в процентах. Конечно, проценты являются ценным инструментом сравнения. Но существуют различные способы затруднять необходимые сравнения и в процентах. Например, проценты могут заставить крупные показатели выглядеть менее значительными.

В своем блоге вице-президент по поиску Google признал, что его компания сталкивается с проблемами фейковых новостей, дезинформации и другого неуместного контента: «Наши алгоритмы помогают выявлять надежные источники среди сотен миллиардов страниц в нашем поисковом индексе. Однако стало очевидным, что небольшая часть запросов в нашем повседневном трафике (около 0,25%) выдает непристойные или откровенно вводящие в заблуждение результаты, а это не то, что нужно людям». Тут можно отметить две вещи. В первую очередь нам демонстрируют огромное, но практически не имеющее к нам отношения число как бы в роли контекста. «Сотни миллиардов страниц в нашем поисковом индексе». Этому огромному числу противопоставлено крошечное 0,25%. Но сотни миллиардов не имеют к этому особого отношения: это количество проиндексированных страниц, а не число поисковых запросов. Неважно, проиндексированы десять тысяч или сотни миллиардов страниц. Если 0,25% запросов в Google ведут не туда, у вас один на четыре сотни шанс получить чушь в результате поиска.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Вотум недоверия: с чем сталкиваются 20-летние, становясь руководителями Вотум недоверия: с чем сталкиваются 20-летние, становясь руководителями

Эйджизм и дискриминация: проблемы молодых управленцев

Forbes
Виды приложений: какими бывают мобильные сервисы и как их использовать в бизнесе Виды приложений: какими бывают мобильные сервисы и как их использовать в бизнесе

Почему заказывают разработку приложений и какие виды используют в бизнесе

ТехИнсайдер
Собраться с духами: чем японские и китайские сказки отличаются от европейских? Собраться с духами: чем японские и китайские сказки отличаются от европейских?

Что собой представляет фольклор Азии и как он отражается в современной культуре?

Правила жизни
Отрывок из нового романа Алексея Сальникова «Оккульттрегер» Отрывок из нового романа Алексея Сальникова «Оккульттрегер»

Роман не теряет трезвый взгляд на российскую действительность

СНОБ
4 типа пар, в которых женщины изменяют чаще, чем мужчины 4 типа пар, в которых женщины изменяют чаще, чем мужчины

В каких отношениях женщины изменяют чаще всего и почему?

Psychologies
Валя Карнавал и Саша Стоун: история любви - первая встреча, измена, предложение Валя Карнавал и Саша Стоун: история любви - первая встреча, измена, предложение

Роман Вали Карнавал и Саши Стоуна развивался с космической скоростью

VOICE
Евгений Князев: Евгений Князев:

Евгений Князев всегда недоволен собой

Караван историй
5 упражнений, которые помогут снять боли в спине: разгрузка для тех, кто ведет сидячий образ жизни 5 упражнений, которые помогут снять боли в спине: разгрузка для тех, кто ведет сидячий образ жизни

Простые упражнения, которые помогут расслабить позвоночник

ТехИнсайдер
Как не нужно заваривать чай Как не нужно заваривать чай

Не повторяй этих ошибок, если хочешь пить чай и не морщиться

Maxim
10 малоизвестных «Запорожцев»: родственники 10 малоизвестных «Запорожцев»: родственники

У ЗАЗ был целый ряд интересных и неизвестных непрофессионалам машин

ТехИнсайдер
Что нужно знать об антидепрессантах. Часть 2 Что нужно знать об антидепрессантах. Часть 2

Какими бывают побочные эффекты от антидепрессантов

СНОБ
Эффективное утяжеление тренировки с гантелями для женщин в домашних условиях Эффективное утяжеление тренировки с гантелями для женщин в домашних условиях

Топ-10 упражнений для идеальной фигуры

Лиза

Что успел сделать за стремительную жизнь режиссер Евгений Вахтангов

Правила жизни
«О дружбе. Эволюция, биология и суперсила главных в жизни связей»: Как устроена дружба и почему она необходима всем нам «О дружбе. Эволюция, биология и суперсила главных в жизни связей»: Как устроена дружба и почему она необходима всем нам

Как устроена дружба, чем она отличается от семейных отношений и любви

N+1
Что такое вылет колесного диска и как не ошибиться с его выбором Что такое вылет колесного диска и как не ошибиться с его выбором

Подбирая колесные диски на автомобиль, следует обращать внимание на вылет диска

РБК
На что способна NFC: и мы не о бесконтактных платежах На что способна NFC: и мы не о бесконтактных платежах

NFC может использоваться не только для бесконтактных платежей

CHIP
Мегапоезд с ядерным реактором: авантюрный проект советских инженеров Мегапоезд с ядерным реактором: авантюрный проект советских инженеров

Инженеры середины ХХ столетия мечтали о гигантских поездах с атомным сердцем

ТехИнсайдер
Кого считать мертвым: как менялись представления о границе между жизнью и смертью Кого считать мертвым: как менялись представления о границе между жизнью и смертью

Современная медицина поставила под сомнение привычную черту смерти

Вокруг света
Серфинг по-русски: где и как поймать волну от Калининграда до Камчатки Серфинг по-русски: где и как поймать волну от Калининграда до Камчатки

Русские серферы — суровые ребята, катающиеся на Балтийском и Японском морях

Вокруг света
7 лучших научно-фантастических романов с историей, охватывающей целые эпохи 7 лучших научно-фантастических романов с историей, охватывающей целые эпохи

Несколько фантастических историй продолжительностью в многие века и тысячелетия

ТехИнсайдер
Любительский разряд Любительский разряд

Как марафоны и регаты стали площадками для нетворкинга?

Forbes Life
Как стартап Mirvie научился предсказывать осложнения беременности и привлек $60 млн Как стартап Mirvie научился предсказывать осложнения беременности и привлек $60 млн

Как стартап Mirvie планирует вывести на рынок революционный тест на преэклампсию

Forbes
Мы думали, их не существует: 5 вымышленных животных, которые оказались настоящими Мы думали, их не существует: 5 вымышленных животных, которые оказались настоящими

Xасто животные, ведущие скрытный образ жизни, считаются вымышленными

ТехИнсайдер
Топ-10: детективные сериалы 2021 года, которые не захочется ставить на паузу Топ-10: детективные сериалы 2021 года, которые не захочется ставить на паузу

Детективные истории, которые не дадут вам оторваться

VOICE
Как сон, стресс и счастье меняются после 35 лет Как сон, стресс и счастье меняются после 35 лет

Что такое «средний возраст», когда он приходит и как меняет жизнь

Maxim
«О Великой Отечественной войне нужно рассказывать»: праздновать 9 Мая или нет? «О Великой Отечественной войне нужно рассказывать»: праздновать 9 Мая или нет?

Как мы отмечаем День Победы и почему делаем это именно так?

Psychologies
5 самых глубоких озер мира: невиданные красоты природы 5 самых глубоких озер мира: невиданные красоты природы

Глубочайшие озера, которые будоражат воображение

ТехИнсайдер
Секс и Дарвин, или Почему все не так однозначно Секс и Дарвин, или Почему все не так однозначно

Почему дарвинизм не так прост, как кажется на первый взгляд

СНОБ
Лучшие настолки: самые интересные настольные игры для маленькой и большой компании Лучшие настолки: самые интересные настольные игры для маленькой и большой компании

Как не утонуть среди ярких коробок и выбрать самую лучшую и увлекательную игру?

ТехИнсайдер
27 признаков поверхностных отношений 27 признаков поверхностных отношений

Список, по которому можно определить, насколько глубоки ваши отношения

Psychologies
Открыть в приложении