Отрывок из книги «Полный бред! Скептицизм в мире больших данных»

N+1Наука

«Полный бред! Скептицизм в мире больших данных». Как относиться к получаемой информации критически

Манн, Иванов и Фербер, научно-популярные книгоиздатели

Если кто-то подкрепляет утверждения затейливыми терминами, цифрами и красивыми графиками, это еще не значит, что ему можно доверять. Статистика и язык точных наук могут быть всего лишь инструментами, призванными скрыть обман. Тот, кто умеет анализировать и перепроверять информацию, скорее всего, заметит подвох — остальные рискуют попасться в ловушку. В книге «Полный бред! Скептицизм в мире больших данных» (издательство «Манн, Иванов и Фербер»), переведенной на русский Елизаветой Пономаревой, ученые Карл Бергстром и Джевин Уэст рассказывают, как распознать чушь (в оригинале — bullshit) и почему для этого совсем не обязательно быть специалистом, а достаточно воспользоваться обыкновенной логикой. Предлагаем вам ознакомиться с фрагментом, посвященным «ошибке прокурора» и уровню значимости (p-value).

Ошибка прокурора

Как мы видели, в большинстве научных исследований ищут закономерности в данных, позволяющие делать выводы о мире. Но как отличить закономерность от случайного шума? И как определить, насколько она значима? Существует несколько способов это сделать, и самый распространенный — это использование р-значения. Грубо говоря, р-значение указывает, насколько вероятно, что наблюдаемая закономерность возникла по чистой случайности. Если это маловероятно, то мы можем сказать, что результат статистически значим. Но что это на самом деле означает и как нам трактовать р-значение? Мы ответим на эти вопросы с помощью короткой истории.

Представьте, что вы известный адвокат, который защищает скромного биолога, обвиняемого в самом поразительном похищении предмета искусства в современной истории.

Это сенсационное преступление. Богатая собирательница отправила частную коллекцию из тридцати шедевров европейского искусства на охраняемом поезде из своего особняка в Санта-Кларе в аукционный дом в Нью-Йорке. Когда поезд достиг пункта назначения, коробки отнесли в аукционный дом для распаковки. Путешествие прошло без происшествий, и к коробкам, на первый взгляд, никто не прикасался. Но, к всеобщему ужасу, четыре самые ценные картины были вырезаны из рам и исчезли! Ни полиция, ни страховая компания не нашли ни единой улики, не считая единственного отпечатка пальца на раме одной из пропавших работ. Украденные шедевры так никогда и не отыскали.

При отсутствии каких-либо иных наметок полиция прогнала от печаток пальца через огромную базу данных ФБР и нашла совпадение — отпечаток вашего клиента. (Он сдал свои отпечатки Администрации транспортной безопасности в обмен на возможность проходить досмотр в аэропорту, не снимая ботинок.) На допросе выяснилось, что у вашего клиента нет алиби. Он утверждает, что ни с кем не контактировал две недели, пока выслеживал окольцованную куропатку в горах Высокая Сьерра в рамках научного проекта.

Несмотря на отсутствие алиби, вы уверены, что ваш клиент не может быть виновен. Он всего лишь застенчивый ученый, а не хладнокровный похититель шедевров. У него уже есть два гранта NSF на исследование размножения куропаток, и, похоже, он не нуждается в дополнительных источниках дохода. К тому же, насколько вы заметили, он ни черта не понимает в искусстве; да что там, он считает, что Донателло — это черепашка-ниндзя.

Тем не менее начинается судебный процесс, и вы сталкиваетесь с блестящей молодой звездой прокуратуры. После описания всех остальных доказательств вины вашего клиента — слабых и косвенных — прокурор переходит к своему козырю, отпечатку пальца. Прокурор рассказывает присяжным, как именно компьютер сопоставляет отпечатки пальцев, и завершает свое выступление словами: «Нет абсолютно никаких шансов случайного совпадения настолько идентичных отпечатков».

Вы опровергаете его заявление: «По вашим словам, нет абсолютно никаких шансов настолько точного совпадения. Но так не бывает. В каждом тесте есть по крайней мере небольшой шанс ошибки». — «Конечно, — уступает он, — в принципе, тесты могут ошибаться. Но на практике шанс, что это случится, нулевой. Исследования ФБР показывают, что существует один шанс на десять миллионов, что два отпечатка совпадут настолько же точно. Один на десять миллионов — тут нет места сомнениям!»

Именно этого вы и ждали. Вы обращаетесь к присяжным и рисуете таблицу на три строки и два столбца на большом листе бумаги. Выглядит она примерно вот так.

«Я думаю, все мы согласны, что это преступление было кем-то совершено. И давайте также предположим, что отпечатки виновного есть в базе данных. Может быть, и нет, — обращаетесь вы к прокурору, — но это ослабит ваши доказательства. Так что давайте предположим, что они есть в базе». Прокурор кивает. «Тогда таблица должна выглядеть примерно вот так». Вы заполняете верхний ряд большим красным маркером.

Повернувшись к прокурору, вы интересуетесь: «Сколько человек включены в эту вашу базу ФБР?» Он перебивает вас: «Возражение, Ваша честь! Какое отношение это имеет к делу?» — «В этом и есть вся суть дела, — объясняете вы. — Я убежден, что объясню это все в течение следующих нескольких минут». — «Возражение отклонено». Сторона обвинения признается, что, если учесть все отпечатки пальцев преступников в США, все отпечатки гражданских лиц, полученные при проверке их биографий, и все отпечатки из базы Администрации транспортной безопасности, в базе представлено приблизительно пятьдесят миллионов американцев. И конечно, большинство отпечатков в базе не совпадают с тем, что найден на раме.

«Итак, теперь мы можем заполнять таблицу дальше», — говорите вы и вписываете число 50 000 000 в нижний правый угол.

Теперь вы указываете на нижний левый угол (это невиновные люди, чьи отпечатки тем не менее совпадут с найденным) и спрашиваете: «Как вы думаете, что нужно вписать сюда?»

Вы смотрите прямо на прокурора. «Вы сказали, что существует один шанс на десять миллионов, что алгоритм нашел неправильное совпадение. Это значит, что среди пятидесяти миллионов человек в этой базе должно быть примерно пять, чьи отпечатки совпадают с найденным и на месте преступления. Так что давайте заполним таблицу следующим образом»

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Химики надышали аммиака в микрокапли воды Химики надышали аммиака в микрокапли воды

Что они представляют собой заряженные частицы, детектируемые с микрокаплями воды

N+1
5 самых ядовитых грибов в мире: не смейте даже прикасаться к ним 5 самых ядовитых грибов в мире: не смейте даже прикасаться к ним

Собирая грибы в лесу, важно быть начеку

ТехИнсайдер
Генетики выявили старейшего известного домашнего кота Китая Генетики выявили старейшего известного домашнего кота Китая

Самая ранняя домашняя кошка жила в VIII или IX веках нашей эры

N+1
Три рыбки у водопада Три рыбки у водопада

Удивительное путешествие в страну, где «13 месяцев солнца», но льют дожди

Вокруг света
Дискуссия о формате: почему российской рознице нужны единые стандарты регулирования Дискуссия о формате: почему российской рознице нужны единые стандарты регулирования

Государство хочет установить правила регулирования работы маркетплейсов

Forbes
Три молочных зуба из испанской пещеры оказались неандертальскими Три молочных зуба из испанской пещеры оказались неандертальскими

Они принадлежали детям, жившим около 45–42 тысяч лет назад

N+1
Управлять авто, ловить мошенников и писать сценарии: на что уже сегодня способны нейросети Управлять авто, ловить мошенников и писать сценарии: на что уже сегодня способны нейросети

Нейросеть — механизм, схожий по принципу работы с мозговой деятельностью

ТехИнсайдер
5 самых необычных криптовалют, о которых ты (пока) не слышал 5 самых необычных криптовалют, о которых ты (пока) не слышал

Не одним биткоином живы!

Maxim
Собеседование в Долину: как россиянки строят карьеры в международных IT-компаниях Собеседование в Долину: как россиянки строят карьеры в международных IT-компаниях

Forbes Woman поговорил с женщинами, работающими в IT-компаниях за рубежом

Forbes
Деликатес из льна, турецкие мотивы и пир горой за 700 рублей: чем кормят туристов в Дагестане Деликатес из льна, турецкие мотивы и пир горой за 700 рублей: чем кормят туристов в Дагестане

Южная республика готова удивить даже искушенных гастротуристов

Вокруг света
Винишко с подругой vs поход к психологу: что выбрать Винишко с подругой vs поход к психологу: что выбрать

Всегда ли откровенные разговоры на кухне помогают залечить душевные раны?

Psychologies
Беспамятство за работой Беспамятство за работой

Михаил Трофименков о французском режиссере Алене Рене

Weekend
Противоядие против старения: как работает рапамицин Противоядие против старения: как работает рапамицин

Потрясающий рассказ о настоящей науке и старении

Вокруг света
О чем не сняли кино: настоящие приключения графа Калиостро в России О чем не сняли кино: настоящие приключения графа Калиостро в России

Дорог в жизни Алессандро Калиостро было великое множество

Вокруг света
Далеко в горах Карачаево-Черкесии: 3 маршрута к живописным Софийским озерам Далеко в горах Карачаево-Черкесии: 3 маршрута к живописным Софийским озерам

Ни один объектив не передаст всех красок этих мест — там лучше побывать самому

Вокруг света
Оракул маркетинга: как актер Эдвард Нортон пытается победить старомодные телерейтинги Оракул маркетинга: как актер Эдвард Нортон пытается победить старомодные телерейтинги

Как Эдвард Нортон бросил вызов привычному положению дел на телевидении

Forbes
Жара, насекомые и другие опасности Жара, насекомые и другие опасности

Как обеспечить безопасность детей летом

СНОБ
Директор «Российской креативной недели» Марина Абрамова: Без креаторов не получится построить нашу Tesla из «Лады Калины» Директор «Российской креативной недели» Марина Абрамова: Без креаторов не получится построить нашу Tesla из «Лады Калины»

Как сейчас обстоят дела в креативных отраслях

СНОБ
Анастасия Ефимова: «Если тратить свою энергию на обиды, тогда ее не останется больше ни на что» Анастасия Ефимова: «Если тратить свою энергию на обиды, тогда ее не останется больше ни на что»

Отельер Анастасия Ефимова – о гостеприимстве и духе времени

СНОБ
Как найти IT-специалистов, когда вокруг все горит Как найти IT-специалистов, когда вокруг все горит

Как грамотно хантить IT-специалистов и какие еще актуальные уловки использовать

Inc.
О чем шипит мадагаскарский таракан О чем шипит мадагаскарский таракан

Немного о популяции мадагаскарских шипящих тараканов в Москве

Наука
Что смотреть на Beat Film Festival Что смотреть на Beat Film Festival

Beat Film Festival — своеобразный путеводитель по мировому культурному ландшафту

Weekend
8 травяных чаев, которые тебя взбодрят 8 травяных чаев, которые тебя взбодрят

Начинать утро с кофе – классика жанра. Но не всем его можно пить

Лиза
Вид с мостика: что может узнать о жизни миллиардеров капитан суперъяхты Вид с мостика: что может узнать о жизни миллиардеров капитан суперъяхты

Книга Брендана О'Шэннесси поможет взглянуть на нюансы управления суперъяхтами

Forbes
В римских амфорах нашли остатки белого и красного вина В римских амфорах нашли остатки белого и красного вина

Химики и палеоботаники исследовали содержимое сосудов, найденных у берегов Лацио

N+1
Какой главный совет вы хотели бы дать вашему ребенку? Какой главный совет вы хотели бы дать вашему ребенку?

Какой полезный и важный жизненный совет стоит дать своему ребенку?

СНОБ
Беглянка с мольбертом: Элизабет Виже-Лебрен, любимая художница европейских аристократов Беглянка с мольбертом: Элизабет Виже-Лебрен, любимая художница европейских аристократов

Элизабет Виже-Лебрен писала парадные портреты европейских монарших особ

Вокруг света
Навыки выживания: что делать, если вы заблудились в лесу Навыки выживания: что делать, если вы заблудились в лесу

Советы эксперта, которые могут спасти вам жизнь

Вокруг света
Крупнейшие разливы нефти в истории: вот как выглядят страшнейшие экологические катастрофы Крупнейшие разливы нефти в истории: вот как выглядят страшнейшие экологические катастрофы

Внушительные катастрофы современности, связанные с нефтью

ТехИнсайдер
NASA выбрало место высадки для венерианского атмосферного зонда DAVINCI NASA выбрало место высадки для венерианского атмосферного зонда DAVINCI

Как будет проведено исследование атмосферы и поверхности Венеры

N+1
Открыть в приложении