Отрывок из книги «Полный бред! Скептицизм в мире больших данных»

N+1Наука

«Полный бред! Скептицизм в мире больших данных». Как относиться к получаемой информации критически

Манн, Иванов и Фербер, научно-популярные книгоиздатели

Если кто-то подкрепляет утверждения затейливыми терминами, цифрами и красивыми графиками, это еще не значит, что ему можно доверять. Статистика и язык точных наук могут быть всего лишь инструментами, призванными скрыть обман. Тот, кто умеет анализировать и перепроверять информацию, скорее всего, заметит подвох — остальные рискуют попасться в ловушку. В книге «Полный бред! Скептицизм в мире больших данных» (издательство «Манн, Иванов и Фербер»), переведенной на русский Елизаветой Пономаревой, ученые Карл Бергстром и Джевин Уэст рассказывают, как распознать чушь (в оригинале — bullshit) и почему для этого совсем не обязательно быть специалистом, а достаточно воспользоваться обыкновенной логикой. Предлагаем вам ознакомиться с фрагментом, посвященным «ошибке прокурора» и уровню значимости (p-value).

Ошибка прокурора

Как мы видели, в большинстве научных исследований ищут закономерности в данных, позволяющие делать выводы о мире. Но как отличить закономерность от случайного шума? И как определить, насколько она значима? Существует несколько способов это сделать, и самый распространенный — это использование р-значения. Грубо говоря, р-значение указывает, насколько вероятно, что наблюдаемая закономерность возникла по чистой случайности. Если это маловероятно, то мы можем сказать, что результат статистически значим. Но что это на самом деле означает и как нам трактовать р-значение? Мы ответим на эти вопросы с помощью короткой истории.

Представьте, что вы известный адвокат, который защищает скромного биолога, обвиняемого в самом поразительном похищении предмета искусства в современной истории.

Это сенсационное преступление. Богатая собирательница отправила частную коллекцию из тридцати шедевров европейского искусства на охраняемом поезде из своего особняка в Санта-Кларе в аукционный дом в Нью-Йорке. Когда поезд достиг пункта назначения, коробки отнесли в аукционный дом для распаковки. Путешествие прошло без происшествий, и к коробкам, на первый взгляд, никто не прикасался. Но, к всеобщему ужасу, четыре самые ценные картины были вырезаны из рам и исчезли! Ни полиция, ни страховая компания не нашли ни единой улики, не считая единственного отпечатка пальца на раме одной из пропавших работ. Украденные шедевры так никогда и не отыскали.

При отсутствии каких-либо иных наметок полиция прогнала от печаток пальца через огромную базу данных ФБР и нашла совпадение — отпечаток вашего клиента. (Он сдал свои отпечатки Администрации транспортной безопасности в обмен на возможность проходить досмотр в аэропорту, не снимая ботинок.) На допросе выяснилось, что у вашего клиента нет алиби. Он утверждает, что ни с кем не контактировал две недели, пока выслеживал окольцованную куропатку в горах Высокая Сьерра в рамках научного проекта.

Несмотря на отсутствие алиби, вы уверены, что ваш клиент не может быть виновен. Он всего лишь застенчивый ученый, а не хладнокровный похититель шедевров. У него уже есть два гранта NSF на исследование размножения куропаток, и, похоже, он не нуждается в дополнительных источниках дохода. К тому же, насколько вы заметили, он ни черта не понимает в искусстве; да что там, он считает, что Донателло — это черепашка-ниндзя.

Тем не менее начинается судебный процесс, и вы сталкиваетесь с блестящей молодой звездой прокуратуры. После описания всех остальных доказательств вины вашего клиента — слабых и косвенных — прокурор переходит к своему козырю, отпечатку пальца. Прокурор рассказывает присяжным, как именно компьютер сопоставляет отпечатки пальцев, и завершает свое выступление словами: «Нет абсолютно никаких шансов случайного совпадения настолько идентичных отпечатков».

Вы опровергаете его заявление: «По вашим словам, нет абсолютно никаких шансов настолько точного совпадения. Но так не бывает. В каждом тесте есть по крайней мере небольшой шанс ошибки». — «Конечно, — уступает он, — в принципе, тесты могут ошибаться. Но на практике шанс, что это случится, нулевой. Исследования ФБР показывают, что существует один шанс на десять миллионов, что два отпечатка совпадут настолько же точно. Один на десять миллионов — тут нет места сомнениям!»

Именно этого вы и ждали. Вы обращаетесь к присяжным и рисуете таблицу на три строки и два столбца на большом листе бумаги. Выглядит она примерно вот так.

«Я думаю, все мы согласны, что это преступление было кем-то совершено. И давайте также предположим, что отпечатки виновного есть в базе данных. Может быть, и нет, — обращаетесь вы к прокурору, — но это ослабит ваши доказательства. Так что давайте предположим, что они есть в базе». Прокурор кивает. «Тогда таблица должна выглядеть примерно вот так». Вы заполняете верхний ряд большим красным маркером.

Повернувшись к прокурору, вы интересуетесь: «Сколько человек включены в эту вашу базу ФБР?» Он перебивает вас: «Возражение, Ваша честь! Какое отношение это имеет к делу?» — «В этом и есть вся суть дела, — объясняете вы. — Я убежден, что объясню это все в течение следующих нескольких минут». — «Возражение отклонено». Сторона обвинения признается, что, если учесть все отпечатки пальцев преступников в США, все отпечатки гражданских лиц, полученные при проверке их биографий, и все отпечатки из базы Администрации транспортной безопасности, в базе представлено приблизительно пятьдесят миллионов американцев. И конечно, большинство отпечатков в базе не совпадают с тем, что найден на раме.

«Итак, теперь мы можем заполнять таблицу дальше», — говорите вы и вписываете число 50 000 000 в нижний правый угол.

Теперь вы указываете на нижний левый угол (это невиновные люди, чьи отпечатки тем не менее совпадут с найденным) и спрашиваете: «Как вы думаете, что нужно вписать сюда?»

Вы смотрите прямо на прокурора. «Вы сказали, что существует один шанс на десять миллионов, что алгоритм нашел неправильное совпадение. Это значит, что среди пятидесяти миллионов человек в этой базе должно быть примерно пять, чьи отпечатки совпадают с найденным и на месте преступления. Так что давайте заполним таблицу следующим образом»

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

ДНК с троса краболовки помогла определить экотип запутавшейся и погибшей косатки ДНК с троса краболовки помогла определить экотип запутавшейся и погибшей косатки

Зоологи установили происхождение косатки, хотя не имели ничего, кроме снасти

N+1
Физики поймали в магнитооптическую ловушку многоатомные молекулы Физики поймали в магнитооптическую ловушку многоатомные молекулы

Первая успешная попытка захвата многоатомных молекул в магнитооптическую ловушку

N+1
«С каждым вдохом: Удивительная история наших легких» «С каждым вдохом: Удивительная история наших легких»

О поиске препарата для борьбы с идиопатическим легочным фиброзом

N+1
Бавары похоронили убитого в бою мужчину ничком. Но вместе с ценными вещами Бавары похоронили убитого в бою мужчину ничком. Но вместе с ценными вещами

Антропологи исследовали кости убитого в VII–VIII веке индивида

N+1
Чек-лист тревожного человека: как понять, что тебе нужна помощь Чек-лист тревожного человека: как понять, что тебе нужна помощь

Как понять, что твоя тревожность уже вышла за рамки нормальной реакции

VOICE
Rihanna Rihanna

Рианна является самой богатой женщиной в мире музыки

ЖАРА Magazine
Удобство и минимум действий: как используется UX&UI дизайн для создания интерфейсов онлайн-кинотеатров Удобство и минимум действий: как используется UX&UI дизайн для создания интерфейсов онлайн-кинотеатров

Почему именно в онлайн-кинотеатрах особенно важно проектирование интерфейсов

ТехИнсайдер
«Чудо дыхания. Как работают наши легкие и как поддержать их здоровье». Как работают наши легкие и как поддержать их здоровье «Чудо дыхания. Как работают наши легкие и как поддержать их здоровье». Как работают наши легкие и как поддержать их здоровье

Большинство из нас никогда не задумывались о том, как мы дышим

N+1
«Чучело» в 2022 году: 3 причины посмотреть «Невидимый мир» «Чучело» в 2022 году: 3 причины посмотреть «Невидимый мир»

Чем примечателен «Невидимый мир» Лауры Вандель?

Psychologies
Да здравствует абсурд: 10 запоминающихся заявлений на суде Джонни Деппа и Эмбер Херд Да здравствует абсурд: 10 запоминающихся заявлений на суде Джонни Деппа и Эмбер Херд

Шестилетняя схватка Джонни Деппа и Эмбер Херд завершилась

Правила жизни
Миф о третьем свидании: когда надо идти в постель с мужчиной, если тебе нужны отношения Миф о третьем свидании: когда надо идти в постель с мужчиной, если тебе нужны отношения

Почему говорят, что сексом нельзя заниматься раньше, чем на третьем свидании?

VOICE
Сын стал дочерью, в любви полный штиль: трагедия и одиночество богатейшего человека Земли Илона Маска Сын стал дочерью, в любви полный штиль: трагедия и одиночество богатейшего человека Земли Илона Маска

За званием самого богатого человека в мире скрывается много проблем

VOICE
Эпоха Girlboss: как ярлык «успешного успеха» мешает женщинам вести бизнес Эпоха Girlboss: как ярлык «успешного успеха» мешает женщинам вести бизнес

Почему основательницы компаний стараются уйти от гендерно-окрашенного нарратива

Forbes
Навыки выживания: что делать, если вы заблудились в лесу Навыки выживания: что делать, если вы заблудились в лесу

Советы эксперта, которые могут спасти вам жизнь

Вокруг света
10 знаковых грузовиков из США 10 знаковых грузовиков из США

Компаний, делающих или делавших ранее те самые легендарные траки

ТехИнсайдер
Зверь из Хвасона: почему самый опасный маньяк Южной Кореи избежал наказания Зверь из Хвасона: почему самый опасный маньяк Южной Кореи избежал наказания

Иногда преступникам удается уйти от правосудия очень странными путями

VOICE
Ошибка 0x80004005 в Windows: способы решения проблемы Ошибка 0x80004005 в Windows: способы решения проблемы

Рассказываем о причинах появления ошибки 0x80004005 в Windows

CHIP
Горцы — и как с ними быть в новой реальности Горцы — и как с ними быть в новой реальности

Горцы — не только люди, живущие в горах, но и название большого числа растений

Наука
Три молочных зуба из испанской пещеры оказались неандертальскими Три молочных зуба из испанской пещеры оказались неандертальскими

Они принадлежали детям, жившим около 45–42 тысяч лет назад

N+1
Плати смартфоном легко! Плати смартфоном легко!

Как работает система быстрых платежей?

VOICE
Как возобновить отношения с бывшим партнером (и стоит ли)? Как возобновить отношения с бывшим партнером (и стоит ли)?

Стоит ли пытаться вернуть бывшего партнера?

Psychologies
Занимательные опыты с неньютоновской жидкостью, которые помогут вам полюбить физику Занимательные опыты с неньютоновской жидкостью, которые помогут вам полюбить физику

Свойства неньютоновской жидкости и эксперименты с ней

ТехИнсайдер
Как устроен Первый Университетский лицей им. Лобачевского Как устроен Первый Университетский лицей им. Лобачевского

Как появилась идея образовательного центра для талантливых детей из регионов

РБК
3 научные причины полюбить музыку 3 научные причины полюбить музыку

Музыка может поменять структуру мозга

Psychologies
Ракетка для сердца: ученые придумали растворяющийся в организме кардиостимулятор Ракетка для сердца: ученые придумали растворяющийся в организме кардиостимулятор

Ученые изобрели кардиостимулятор без проводов и батареи

Вокруг света
Расправить крылья Расправить крылья

Учителя — о том, как вырастить «своих» в маленьком городе

Seasons of life
Обезличeнное мнeние Обезличeнное мнeние

В каких еще областях нам ждать конкуренции с нейросетями в ближайшем будущем?

Цифровой океан
Новые модные породы собак, которые скоро появятся на улицах всех городов Новые модные породы собак, которые скоро появятся на улицах всех городов

За последние годы появилось множество интересных друзей человека

Maxim
Как попасть на другую планету, не выезжая из России: краткий путеводитель по Богдинско-Баскунчакскому заповеднику Как попасть на другую планету, не выезжая из России: краткий путеводитель по Богдинско-Баскунчакскому заповеднику

Это удивительное место находится в Астраханской области

Вокруг света
«Живописец душ» Фальконеса: гимн Барселоне XX века и летопись человеческих страстей «Живописец душ» Фальконеса: гимн Барселоне XX века и летопись человеческих страстей

Отрывок из романа Ильдефонсо Фальконеса «Живописец душ»

Forbes
Открыть в приложении