Отрывок из книги «Полный бред! Скептицизм в мире больших данных»

N+1Наука

«Полный бред! Скептицизм в мире больших данных». Как относиться к получаемой информации критически

Манн, Иванов и Фербер, научно-популярные книгоиздатели

Если кто-то подкрепляет утверждения затейливыми терминами, цифрами и красивыми графиками, это еще не значит, что ему можно доверять. Статистика и язык точных наук могут быть всего лишь инструментами, призванными скрыть обман. Тот, кто умеет анализировать и перепроверять информацию, скорее всего, заметит подвох — остальные рискуют попасться в ловушку. В книге «Полный бред! Скептицизм в мире больших данных» (издательство «Манн, Иванов и Фербер»), переведенной на русский Елизаветой Пономаревой, ученые Карл Бергстром и Джевин Уэст рассказывают, как распознать чушь (в оригинале — bullshit) и почему для этого совсем не обязательно быть специалистом, а достаточно воспользоваться обыкновенной логикой. Предлагаем вам ознакомиться с фрагментом, посвященным «ошибке прокурора» и уровню значимости (p-value).

Ошибка прокурора

Как мы видели, в большинстве научных исследований ищут закономерности в данных, позволяющие делать выводы о мире. Но как отличить закономерность от случайного шума? И как определить, насколько она значима? Существует несколько способов это сделать, и самый распространенный — это использование р-значения. Грубо говоря, р-значение указывает, насколько вероятно, что наблюдаемая закономерность возникла по чистой случайности. Если это маловероятно, то мы можем сказать, что результат статистически значим. Но что это на самом деле означает и как нам трактовать р-значение? Мы ответим на эти вопросы с помощью короткой истории.

Представьте, что вы известный адвокат, который защищает скромного биолога, обвиняемого в самом поразительном похищении предмета искусства в современной истории.

Это сенсационное преступление. Богатая собирательница отправила частную коллекцию из тридцати шедевров европейского искусства на охраняемом поезде из своего особняка в Санта-Кларе в аукционный дом в Нью-Йорке. Когда поезд достиг пункта назначения, коробки отнесли в аукционный дом для распаковки. Путешествие прошло без происшествий, и к коробкам, на первый взгляд, никто не прикасался. Но, к всеобщему ужасу, четыре самые ценные картины были вырезаны из рам и исчезли! Ни полиция, ни страховая компания не нашли ни единой улики, не считая единственного отпечатка пальца на раме одной из пропавших работ. Украденные шедевры так никогда и не отыскали.

При отсутствии каких-либо иных наметок полиция прогнала от печаток пальца через огромную базу данных ФБР и нашла совпадение — отпечаток вашего клиента. (Он сдал свои отпечатки Администрации транспортной безопасности в обмен на возможность проходить досмотр в аэропорту, не снимая ботинок.) На допросе выяснилось, что у вашего клиента нет алиби. Он утверждает, что ни с кем не контактировал две недели, пока выслеживал окольцованную куропатку в горах Высокая Сьерра в рамках научного проекта.

Несмотря на отсутствие алиби, вы уверены, что ваш клиент не может быть виновен. Он всего лишь застенчивый ученый, а не хладнокровный похититель шедевров. У него уже есть два гранта NSF на исследование размножения куропаток, и, похоже, он не нуждается в дополнительных источниках дохода. К тому же, насколько вы заметили, он ни черта не понимает в искусстве; да что там, он считает, что Донателло — это черепашка-ниндзя.

Тем не менее начинается судебный процесс, и вы сталкиваетесь с блестящей молодой звездой прокуратуры. После описания всех остальных доказательств вины вашего клиента — слабых и косвенных — прокурор переходит к своему козырю, отпечатку пальца. Прокурор рассказывает присяжным, как именно компьютер сопоставляет отпечатки пальцев, и завершает свое выступление словами: «Нет абсолютно никаких шансов случайного совпадения настолько идентичных отпечатков».

Вы опровергаете его заявление: «По вашим словам, нет абсолютно никаких шансов настолько точного совпадения. Но так не бывает. В каждом тесте есть по крайней мере небольшой шанс ошибки». — «Конечно, — уступает он, — в принципе, тесты могут ошибаться. Но на практике шанс, что это случится, нулевой. Исследования ФБР показывают, что существует один шанс на десять миллионов, что два отпечатка совпадут настолько же точно. Один на десять миллионов — тут нет места сомнениям!»

Именно этого вы и ждали. Вы обращаетесь к присяжным и рисуете таблицу на три строки и два столбца на большом листе бумаги. Выглядит она примерно вот так.

«Я думаю, все мы согласны, что это преступление было кем-то совершено. И давайте также предположим, что отпечатки виновного есть в базе данных. Может быть, и нет, — обращаетесь вы к прокурору, — но это ослабит ваши доказательства. Так что давайте предположим, что они есть в базе». Прокурор кивает. «Тогда таблица должна выглядеть примерно вот так». Вы заполняете верхний ряд большим красным маркером.

Повернувшись к прокурору, вы интересуетесь: «Сколько человек включены в эту вашу базу ФБР?» Он перебивает вас: «Возражение, Ваша честь! Какое отношение это имеет к делу?» — «В этом и есть вся суть дела, — объясняете вы. — Я убежден, что объясню это все в течение следующих нескольких минут». — «Возражение отклонено». Сторона обвинения признается, что, если учесть все отпечатки пальцев преступников в США, все отпечатки гражданских лиц, полученные при проверке их биографий, и все отпечатки из базы Администрации транспортной безопасности, в базе представлено приблизительно пятьдесят миллионов американцев. И конечно, большинство отпечатков в базе не совпадают с тем, что найден на раме.

«Итак, теперь мы можем заполнять таблицу дальше», — говорите вы и вписываете число 50 000 000 в нижний правый угол.

Теперь вы указываете на нижний левый угол (это невиновные люди, чьи отпечатки тем не менее совпадут с найденным) и спрашиваете: «Как вы думаете, что нужно вписать сюда?»

Вы смотрите прямо на прокурора. «Вы сказали, что существует один шанс на десять миллионов, что алгоритм нашел неправильное совпадение. Это значит, что среди пятидесяти миллионов человек в этой базе должно быть примерно пять, чьи отпечатки совпадают с найденным и на месте преступления. Так что давайте заполним таблицу следующим образом»

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Стремечко назвали идеальной костью для палеогеномного исследования Стремечко назвали идеальной костью для палеогеномного исследования

Почему при анализе древней ДНК нужно отдавать предпочтение стремечку

N+1
Грунт астероида Рюгу оказался схож по составу с углистыми хондритами Грунт астероида Рюгу оказался схож по составу с углистыми хондритами

Результаты анализа образцов грунта астероида Рюгу

N+1
4 способа улучшить сон с помощью спорта 4 способа улучшить сон с помощью спорта

Методы, которые существенно помогают при различных аспектах нарушений сна

ТехИнсайдер
Напоить сайгака Напоить сайгака

Удастся ли сохранить сайгаков?

Вокруг света
Не сдирать! Что делать, если облезает кожа после солнечного ожога Не сдирать! Что делать, если облезает кожа после солнечного ожога

Что делать при солнечном ожоге, чтобы ускорить заживление кожи и облегчить зуд

ТехИнсайдер
Никаких заторов Никаких заторов

7 продуктов, снижающих риск образования тромбов

Лиза
Из Зорро - в пенсионера: новые фото Антонио Бандераса разбили сердце поклонницам по всему миру. Узнаёшь красавца? Из Зорро - в пенсионера: новые фото Антонио Бандераса разбили сердце поклонницам по всему миру. Узнаёшь красавца?

Невозможно смотреть свежие фото Антонио Бандераса!

VOICE
6 пищевых добавок, которые не так вредны, как многие думают 6 пищевых добавок, которые не так вредны, как многие думают

Пищевые добавки стали чуть ли не врагами народа. Но не все из них опасны

Лиза
Ищу себя, найду не скоро: сложности отношений с Ищу себя, найду не скоро: сложности отношений с

Непризнанный гений — это 1% вдохновения и 99% жалоб на непонимание окружающих

VOICE
8 причин, почему мужчинам тяжело живется 8 причин, почему мужчинам тяжело живется

Мужская доля порой бывает совершенно невыносимой

Maxim
Почему мы забываем о сексе и как его вернуть в семейную жизнь Почему мы забываем о сексе и как его вернуть в семейную жизнь

Почему в семейной жизни всегда нужно искать время для секса?

Maxim
Друг Врубеля и кумир Дягилева: как собирал свою коллекцию меценат Михаил Морозов Друг Врубеля и кумир Дягилева: как собирал свою коллекцию меценат Михаил Морозов

Отрывок из монографии «Коллекции Ивана и Михаила Морозовых»

Forbes
Обиженная герцогиня: как Меган Маркл вытеснили с балкона Букингемского дворца Обиженная герцогиня: как Меган Маркл вытеснили с балкона Букингемского дворца

Меган Маркл не подпускали на первый план во время официальных мероприятий

VOICE
Яснотка пугающая и беззащитная Яснотка пугающая и беззащитная

Яснотка — красивая и опасная

Наука и жизнь
5 мест в Солнечной системе, в которых вам точно стоит побывать. Или хотя бы посмотреть на них 5 мест в Солнечной системе, в которых вам точно стоит побывать. Или хотя бы посмотреть на них

Куда лучше всего отправиться в Солнечной системе?

ТехИнсайдер
Беременные и кормящие самки мышей отпугнули самцов мочой с банановым запахом Беременные и кормящие самки мышей отпугнули самцов мочой с банановым запахом

Как самки домовых мышей защищают свое потомство?

N+1
Сказка для взрослых, тайный книжный клуб и новая жизнь пчел: 5 воодушевляющих романов Сказка для взрослых, тайный книжный клуб и новая жизнь пчел: 5 воодушевляющих романов

Книги о том, как люди преодолевают любые невзгоды

СНОБ
Металлурги и демиурги: 6 инженеров, прославивших промышленный Урал Металлурги и демиурги: 6 инженеров, прославивших промышленный Урал

Урал — самая индустриализованная зона планеты Земля

Вокруг света
Как купить подержанный смартфон — отвечают эксперты Как купить подержанный смартфон — отвечают эксперты

На что нужно обратить внимание в первую очередь, если приобретаешь телефон с рук

Maxim
«Ты в пустыне спасательный круг»: ученые создали пленку, которая добывает воду из воздуха «Ты в пустыне спасательный круг»: ученые создали пленку, которая добывает воду из воздуха

Найдено решение по добыче воды для самых жарких и засушливых мест Земли

Вокруг света
Таблетки от кометы и радий от импотенции: 6 абсурдных «лекарств», в которые все верили Таблетки от кометы и радий от импотенции: 6 абсурдных «лекарств», в которые все верили

В истории человечества было немало сомнительных и опасных способов лечения

Вокруг света
Какая религия самая распространенная в мире: в это сложно поверить Какая религия самая распространенная в мире: в это сложно поверить

Какие из самых популярных верований являются наиболее распространенными в мире?

ТехИнсайдер
«Никогда и ничего не просите»: как научиться открыто говорить о своих потребностях «Никогда и ничего не просите»: как научиться открыто говорить о своих потребностях

Почему прямо говорить о своих желаниях — это нормально? И как этому научиться?

Psychologies
21 килограмм: как выглядят самые толстые коты в мире 21 килограмм: как выглядят самые толстые коты в мире

Должно ли хорошего кота быть много?

VOICE
Генная терапия поставила на ноги мышей с миодистрофией Генная терапия поставила на ноги мышей с миодистрофией

Можно ли восстановить работу мышц у мышей на поздних стадиях миодистрофии

N+1
Почему все так любят Блейк Лайвли и Райана Рейнольдса: психотерапевт описывает эту пару Почему все так любят Блейк Лайвли и Райана Рейнольдса: психотерапевт описывает эту пару

Для многих эта пара — эталон счастливого брака. В чем их секрет?

Psychologies
Какие средства по уходу за собой можно украсть у своей девушки? Какие средства по уходу за собой можно украсть у своей девушки?

Сколько якобы женских средств можно вполне использовать и мужчинам тоже

Maxim
Что такое интервальное голодание и почему оно вредно Что такое интервальное голодание и почему оно вредно

Как на самом деле работает голод

РБК
Неприятные спутники: какие психические состояния часто сопровождают депрессию Неприятные спутники: какие психические состояния часто сопровождают депрессию

Отрывок из книги «Так себе» — о заболвениях-спутниках депрессии

Forbes
«Любым способом вывести из строя противника»: 5 фактов о боях роботов «Любым способом вывести из строя противника»: 5 фактов о боях роботов

Бои роботов привлекли внимание большого количества зрителей по всему миру

Вокруг света
Открыть в приложении