Отрывок из книги «Полный бред! Скептицизм в мире больших данных»

N+1Наука

«Полный бред! Скептицизм в мире больших данных». Как относиться к получаемой информации критически

Манн, Иванов и Фербер, научно-популярные книгоиздатели

Если кто-то подкрепляет утверждения затейливыми терминами, цифрами и красивыми графиками, это еще не значит, что ему можно доверять. Статистика и язык точных наук могут быть всего лишь инструментами, призванными скрыть обман. Тот, кто умеет анализировать и перепроверять информацию, скорее всего, заметит подвох — остальные рискуют попасться в ловушку. В книге «Полный бред! Скептицизм в мире больших данных» (издательство «Манн, Иванов и Фербер»), переведенной на русский Елизаветой Пономаревой, ученые Карл Бергстром и Джевин Уэст рассказывают, как распознать чушь (в оригинале — bullshit) и почему для этого совсем не обязательно быть специалистом, а достаточно воспользоваться обыкновенной логикой. Предлагаем вам ознакомиться с фрагментом, посвященным «ошибке прокурора» и уровню значимости (p-value).

Ошибка прокурора

Как мы видели, в большинстве научных исследований ищут закономерности в данных, позволяющие делать выводы о мире. Но как отличить закономерность от случайного шума? И как определить, насколько она значима? Существует несколько способов это сделать, и самый распространенный — это использование р-значения. Грубо говоря, р-значение указывает, насколько вероятно, что наблюдаемая закономерность возникла по чистой случайности. Если это маловероятно, то мы можем сказать, что результат статистически значим. Но что это на самом деле означает и как нам трактовать р-значение? Мы ответим на эти вопросы с помощью короткой истории.

Представьте, что вы известный адвокат, который защищает скромного биолога, обвиняемого в самом поразительном похищении предмета искусства в современной истории.

Это сенсационное преступление. Богатая собирательница отправила частную коллекцию из тридцати шедевров европейского искусства на охраняемом поезде из своего особняка в Санта-Кларе в аукционный дом в Нью-Йорке. Когда поезд достиг пункта назначения, коробки отнесли в аукционный дом для распаковки. Путешествие прошло без происшествий, и к коробкам, на первый взгляд, никто не прикасался. Но, к всеобщему ужасу, четыре самые ценные картины были вырезаны из рам и исчезли! Ни полиция, ни страховая компания не нашли ни единой улики, не считая единственного отпечатка пальца на раме одной из пропавших работ. Украденные шедевры так никогда и не отыскали.

При отсутствии каких-либо иных наметок полиция прогнала от печаток пальца через огромную базу данных ФБР и нашла совпадение — отпечаток вашего клиента. (Он сдал свои отпечатки Администрации транспортной безопасности в обмен на возможность проходить досмотр в аэропорту, не снимая ботинок.) На допросе выяснилось, что у вашего клиента нет алиби. Он утверждает, что ни с кем не контактировал две недели, пока выслеживал окольцованную куропатку в горах Высокая Сьерра в рамках научного проекта.

Несмотря на отсутствие алиби, вы уверены, что ваш клиент не может быть виновен. Он всего лишь застенчивый ученый, а не хладнокровный похититель шедевров. У него уже есть два гранта NSF на исследование размножения куропаток, и, похоже, он не нуждается в дополнительных источниках дохода. К тому же, насколько вы заметили, он ни черта не понимает в искусстве; да что там, он считает, что Донателло — это черепашка-ниндзя.

Тем не менее начинается судебный процесс, и вы сталкиваетесь с блестящей молодой звездой прокуратуры. После описания всех остальных доказательств вины вашего клиента — слабых и косвенных — прокурор переходит к своему козырю, отпечатку пальца. Прокурор рассказывает присяжным, как именно компьютер сопоставляет отпечатки пальцев, и завершает свое выступление словами: «Нет абсолютно никаких шансов случайного совпадения настолько идентичных отпечатков».

Вы опровергаете его заявление: «По вашим словам, нет абсолютно никаких шансов настолько точного совпадения. Но так не бывает. В каждом тесте есть по крайней мере небольшой шанс ошибки». — «Конечно, — уступает он, — в принципе, тесты могут ошибаться. Но на практике шанс, что это случится, нулевой. Исследования ФБР показывают, что существует один шанс на десять миллионов, что два отпечатка совпадут настолько же точно. Один на десять миллионов — тут нет места сомнениям!»

Именно этого вы и ждали. Вы обращаетесь к присяжным и рисуете таблицу на три строки и два столбца на большом листе бумаги. Выглядит она примерно вот так.

«Я думаю, все мы согласны, что это преступление было кем-то совершено. И давайте также предположим, что отпечатки виновного есть в базе данных. Может быть, и нет, — обращаетесь вы к прокурору, — но это ослабит ваши доказательства. Так что давайте предположим, что они есть в базе». Прокурор кивает. «Тогда таблица должна выглядеть примерно вот так». Вы заполняете верхний ряд большим красным маркером.

Повернувшись к прокурору, вы интересуетесь: «Сколько человек включены в эту вашу базу ФБР?» Он перебивает вас: «Возражение, Ваша честь! Какое отношение это имеет к делу?» — «В этом и есть вся суть дела, — объясняете вы. — Я убежден, что объясню это все в течение следующих нескольких минут». — «Возражение отклонено». Сторона обвинения признается, что, если учесть все отпечатки пальцев преступников в США, все отпечатки гражданских лиц, полученные при проверке их биографий, и все отпечатки из базы Администрации транспортной безопасности, в базе представлено приблизительно пятьдесят миллионов американцев. И конечно, большинство отпечатков в базе не совпадают с тем, что найден на раме.

«Итак, теперь мы можем заполнять таблицу дальше», — говорите вы и вписываете число 50 000 000 в нижний правый угол.

Теперь вы указываете на нижний левый угол (это невиновные люди, чьи отпечатки тем не менее совпадут с найденным) и спрашиваете: «Как вы думаете, что нужно вписать сюда?»

Вы смотрите прямо на прокурора. «Вы сказали, что существует один шанс на десять миллионов, что алгоритм нашел неправильное совпадение. Это значит, что среди пятидесяти миллионов человек в этой базе должно быть примерно пять, чьи отпечатки совпадают с найденным и на месте преступления. Так что давайте заполним таблицу следующим образом»

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

В Хорватии нашли захоронение «вампира» В Хорватии нашли захоронение «вампира»

Чем отличаются девиантные захоронения «вампиров»?

N+1
Manicure Vampire Manicure Vampire

Ксения Черемнова и Дима Вишнеев придумали кастом-бренд Manicure Vampire

Собака.ru
Палеонтологи восстановили перья археоптерикса, и объяснили как он летал Палеонтологи восстановили перья археоптерикса, и объяснили как он летал

Как ученые по оставшимся костям могут реконструировать облик археоптерикса?

ТехИнсайдер
Антимиры Антимиры

Теоретически могут существовать целые антигалактики, заполненные антизвездами

ТехИнсайдер
Что вас бесит больше всего: психологический тест с выбором картинки Что вас бесит больше всего: психологический тест с выбором картинки

Пройдите тест и узнайте, от чего может исходить ваша агрессия!

ТехИнсайдер
«Новый декамерон» — 29 эссе о пандемии «Новый декамерон» — 29 эссе о пандемии

Отрывок из сборника сказок и рассуждений о пандемии

СНОБ
«Игра по правилам»: как 9 гендерных стереотипов влияют на сексуальную жизнь мужчин? «Игра по правилам»: как 9 гендерных стереотипов влияют на сексуальную жизнь мужчин?

Как социальные нормы влияют на сексуальную самооценку мужчин?

Psychologies
Компьютер не видит SSD: что делать? Компьютер не видит SSD: что делать?

Рассказываем, почему компьютер не видит SSD и как решить эту проблему

CHIP
Аналитики назвали самые дорогие города для проживания экспатов Аналитики назвали самые дорогие города для проживания экспатов

Самыми дорогими городами для проживания стали Гонконг, Нью-Йорк и Женева

Forbes
Загадка «русской Рапунцель»: что сгубило супермодель Руслану Коршунову Загадка «русской Рапунцель»: что сгубило супермодель Руслану Коршунову

Почему «русская Рапунцель» Руслана Коршунова решила, что больше не хочет жить?

VOICE
«Я слишком добрый»: где взять озверин и как отрастить клыки «Я слишком добрый»: где взять озверин и как отрастить клыки

Можно ли натренировать способность быть агрессивным, а главное — нужно ли?

Psychologies
«Поделилась своими страхами»: Меган Маркл ошеломила девочек в Нидерландах «Поделилась своими страхами»: Меган Маркл ошеломила девочек в Нидерландах

Герцогиня Сассекская совершила тайный визит в подростковый центр

VOICE
Интервью музыкантов «4 позиции Бруно» — первое за шесть лет Интервью музыкантов «4 позиции Бруно» — первое за шесть лет

«4 позиции Бруно» — о новом альбоме, вдохновении и надругательстве над музыкой

СНОБ
Главная трагедия всей жизни Меган Маркл произошла после свадьбы с принцем Гарри Главная трагедия всей жизни Меган Маркл произошла после свадьбы с принцем Гарри

Меган Маркл обладала особым талантом для перемен в мире, считает эксперт

VOICE
Специалисты Neovolt отвечают на вопросы читателей: все, что вы хотели знать про батареи Специалисты Neovolt отвечают на вопросы читателей: все, что вы хотели знать про батареи

Актуальные вопросы на тему покупки и эксплуатации аккумуляторов гаджетов

CHIP
Когнитивный диссонанс: как Филлис Шлэфли строила карьеру, отрицая идеи феминизма Когнитивный диссонанс: как Филлис Шлэфли строила карьеру, отрицая идеи феминизма

Американка Филлис Шлэфли была одной из самых успешных противниц феминизма

Forbes
Пэлтроу в бриллиантах, Лопес на шпильках: как звезды одеваются в отпуске Пэлтроу в бриллиантах, Лопес на шпильках: как звезды одеваются в отпуске

Что надевают звезды в свои свободные от папарацци дни?

VOICE
Как устроен Первый Университетский лицей им. Лобачевского Как устроен Первый Университетский лицей им. Лобачевского

Как появилась идея образовательного центра для талантливых детей из регионов

РБК
От Моники Геллер до Блэр Уолдорф: культовые кинообразы, которые повлияли на моду От Моники Геллер до Блэр Уолдорф: культовые кинообразы, которые повлияли на моду

Лучшие фэшн-хаки культовых и стильных персонажей

VOICE
Новая Москва Новая Москва

Мы давно хотели поговорить с главным архитектором столицы Сергеем Кузнецовым

ТехИнсайдер
У детей ямников из Южного Приуралья обнаружили метастатический рак и цингу У детей ямников из Южного Приуралья обнаружили метастатический рак и цингу

Ученые исследовали останки из двух погребений IV тысячелетия до нашей эры

N+1
Технологический стартап из будущего Технологический стартап из будущего

Как в Москве делают «всепогодные» солнечные батареи

СНОБ
Максим Стоянов: Максим Стоянов:

Интервью со звездой сериала «Шифр» Максимом Стояновым

Коллекция. Караван историй
«Человеческое страдание не поддается измерению»: неизданные лекции Виктора Франкла «Человеческое страдание не поддается измерению»: неизданные лекции Виктора Франкла

Лекции психиатра Виктора Франкла о смысле страдания

Forbes
Замещение импорта и цифровизация: две стороны одного процесса Замещение импорта и цифровизация: две стороны одного процесса

Технологические решения в промышленности, коммуникациях и других отраслях

Forbes
Тайное значение твоего имени: как его узнать и как оно влияет на судьбу Тайное значение твоего имени: как его узнать и как оно влияет на судьбу

Как узнать тайное значение твоего имени и что делать с этой информацией

VOICE
4 способа мужских манипуляций глазами женщин и экспертов 4 способа мужских манипуляций глазами женщин и экспертов

Почему нами манипулируют и мы с легкостью закрываем на это глаза?

Psychologies
Пенсия по-итальянски: как стать миллиардером в 87 лет Пенсия по-итальянски: как стать миллиардером в 87 лет

В 60 лет Джузеппе Криппа решил рискнуть и основать собственный бизнес

Forbes
Как попасть на другую планету, не выезжая из России: краткий путеводитель по Богдинско-Баскунчакскому заповеднику Как попасть на другую планету, не выезжая из России: краткий путеводитель по Богдинско-Баскунчакскому заповеднику

Это удивительное место находится в Астраханской области

Вокруг света
Дети остаются без поддержки взрослых: «Гарри Поттер» глазами семейного терапевта Дети остаются без поддержки взрослых: «Гарри Поттер» глазами семейного терапевта

Системный семейный терапевт оценивает их взаимоотношения персонажей «Поттерианы»

Psychologies
Открыть в приложении