Отрывок из книги «Полный бред! Скептицизм в мире больших данных»

N+1Наука

«Полный бред! Скептицизм в мире больших данных». Как относиться к получаемой информации критически

Манн, Иванов и Фербер, научно-популярные книгоиздатели

Если кто-то подкрепляет утверждения затейливыми терминами, цифрами и красивыми графиками, это еще не значит, что ему можно доверять. Статистика и язык точных наук могут быть всего лишь инструментами, призванными скрыть обман. Тот, кто умеет анализировать и перепроверять информацию, скорее всего, заметит подвох — остальные рискуют попасться в ловушку. В книге «Полный бред! Скептицизм в мире больших данных» (издательство «Манн, Иванов и Фербер»), переведенной на русский Елизаветой Пономаревой, ученые Карл Бергстром и Джевин Уэст рассказывают, как распознать чушь (в оригинале — bullshit) и почему для этого совсем не обязательно быть специалистом, а достаточно воспользоваться обыкновенной логикой. Предлагаем вам ознакомиться с фрагментом, посвященным «ошибке прокурора» и уровню значимости (p-value).

Ошибка прокурора

Как мы видели, в большинстве научных исследований ищут закономерности в данных, позволяющие делать выводы о мире. Но как отличить закономерность от случайного шума? И как определить, насколько она значима? Существует несколько способов это сделать, и самый распространенный — это использование р-значения. Грубо говоря, р-значение указывает, насколько вероятно, что наблюдаемая закономерность возникла по чистой случайности. Если это маловероятно, то мы можем сказать, что результат статистически значим. Но что это на самом деле означает и как нам трактовать р-значение? Мы ответим на эти вопросы с помощью короткой истории.

Представьте, что вы известный адвокат, который защищает скромного биолога, обвиняемого в самом поразительном похищении предмета искусства в современной истории.

Это сенсационное преступление. Богатая собирательница отправила частную коллекцию из тридцати шедевров европейского искусства на охраняемом поезде из своего особняка в Санта-Кларе в аукционный дом в Нью-Йорке. Когда поезд достиг пункта назначения, коробки отнесли в аукционный дом для распаковки. Путешествие прошло без происшествий, и к коробкам, на первый взгляд, никто не прикасался. Но, к всеобщему ужасу, четыре самые ценные картины были вырезаны из рам и исчезли! Ни полиция, ни страховая компания не нашли ни единой улики, не считая единственного отпечатка пальца на раме одной из пропавших работ. Украденные шедевры так никогда и не отыскали.

При отсутствии каких-либо иных наметок полиция прогнала от печаток пальца через огромную базу данных ФБР и нашла совпадение — отпечаток вашего клиента. (Он сдал свои отпечатки Администрации транспортной безопасности в обмен на возможность проходить досмотр в аэропорту, не снимая ботинок.) На допросе выяснилось, что у вашего клиента нет алиби. Он утверждает, что ни с кем не контактировал две недели, пока выслеживал окольцованную куропатку в горах Высокая Сьерра в рамках научного проекта.

Несмотря на отсутствие алиби, вы уверены, что ваш клиент не может быть виновен. Он всего лишь застенчивый ученый, а не хладнокровный похититель шедевров. У него уже есть два гранта NSF на исследование размножения куропаток, и, похоже, он не нуждается в дополнительных источниках дохода. К тому же, насколько вы заметили, он ни черта не понимает в искусстве; да что там, он считает, что Донателло — это черепашка-ниндзя.

Тем не менее начинается судебный процесс, и вы сталкиваетесь с блестящей молодой звездой прокуратуры. После описания всех остальных доказательств вины вашего клиента — слабых и косвенных — прокурор переходит к своему козырю, отпечатку пальца. Прокурор рассказывает присяжным, как именно компьютер сопоставляет отпечатки пальцев, и завершает свое выступление словами: «Нет абсолютно никаких шансов случайного совпадения настолько идентичных отпечатков».

Вы опровергаете его заявление: «По вашим словам, нет абсолютно никаких шансов настолько точного совпадения. Но так не бывает. В каждом тесте есть по крайней мере небольшой шанс ошибки». — «Конечно, — уступает он, — в принципе, тесты могут ошибаться. Но на практике шанс, что это случится, нулевой. Исследования ФБР показывают, что существует один шанс на десять миллионов, что два отпечатка совпадут настолько же точно. Один на десять миллионов — тут нет места сомнениям!»

Именно этого вы и ждали. Вы обращаетесь к присяжным и рисуете таблицу на три строки и два столбца на большом листе бумаги. Выглядит она примерно вот так.

«Я думаю, все мы согласны, что это преступление было кем-то совершено. И давайте также предположим, что отпечатки виновного есть в базе данных. Может быть, и нет, — обращаетесь вы к прокурору, — но это ослабит ваши доказательства. Так что давайте предположим, что они есть в базе». Прокурор кивает. «Тогда таблица должна выглядеть примерно вот так». Вы заполняете верхний ряд большим красным маркером.

Повернувшись к прокурору, вы интересуетесь: «Сколько человек включены в эту вашу базу ФБР?» Он перебивает вас: «Возражение, Ваша честь! Какое отношение это имеет к делу?» — «В этом и есть вся суть дела, — объясняете вы. — Я убежден, что объясню это все в течение следующих нескольких минут». — «Возражение отклонено». Сторона обвинения признается, что, если учесть все отпечатки пальцев преступников в США, все отпечатки гражданских лиц, полученные при проверке их биографий, и все отпечатки из базы Администрации транспортной безопасности, в базе представлено приблизительно пятьдесят миллионов американцев. И конечно, большинство отпечатков в базе не совпадают с тем, что найден на раме.

«Итак, теперь мы можем заполнять таблицу дальше», — говорите вы и вписываете число 50 000 000 в нижний правый угол.

Теперь вы указываете на нижний левый угол (это невиновные люди, чьи отпечатки тем не менее совпадут с найденным) и спрашиваете: «Как вы думаете, что нужно вписать сюда?»

Вы смотрите прямо на прокурора. «Вы сказали, что существует один шанс на десять миллионов, что алгоритм нашел неправильное совпадение. Это значит, что среди пятидесяти миллионов человек в этой базе должно быть примерно пять, чьи отпечатки совпадают с найденным и на месте преступления. Так что давайте заполним таблицу следующим образом»

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

В горгонопсе с Мальорки заподозрили древнейшего представителя терапсид В горгонопсе с Мальорки заподозрили древнейшего представителя терапсид

Ученые обнаружили на острове Мальорка в Средиземном море остатки горгонопса

N+1
Когда надежды были большими Когда надежды были большими

Что нам осталось от Виктора Цоя

Weekend
Мутации определяют ход биологических часов организма Мутации определяют ход биологических часов организма

Биологический возраст организма определяется накоплением случайных мутаций

ТехИнсайдер
И стала Россия империей… И стала Россия империей…

Итогом Северной войны стало перерождение России в империю

Дилетант
Как набрать мышечную массу согласно науке: секреты рельефного тела Как набрать мышечную массу согласно науке: секреты рельефного тела

Набор мышечной массы – это не просто про штангу и куриную грудку

ТехИнсайдер
«Цифры не лгут»: как ограничение абортов вредит экономике и отбрасывает нас в прошлое «Цифры не лгут»: как ограничение абортов вредит экономике и отбрасывает нас в прошлое

Как контроль над репродуктивным здоровьем связан с экономикой?

Forbes
Энтомологи усомнились в скором вымирании монархов Энтомологи усомнились в скором вымирании монархов

Вопреки популярному мнению, бабочки монархи не находятся на грани вымирания

N+1
Жизнь с роботом, развод с психопатом: отрывок из романа «Созданы для любви» Жизнь с роботом, развод с психопатом: отрывок из романа «Созданы для любви»

Глава из романа «Созданы для любви» — абсурдного и тонкого рассуждения о семье

Forbes
Свернуть полетную программу: ботаники нашли у одуванчика механизм принятия решений Свернуть полетную программу: ботаники нашли у одуванчика механизм принятия решений

Растения умеют запрещать семенам отрываться

Вокруг света
Акрофобия: откуда берется страх высоты и как его побороть Акрофобия: откуда берется страх высоты и как его побороть

Рассказываем, что такое акрофобия, откуда она берется и как ее вылечить

РБК
Ботаники описали первое хищное растение с подземными ловчими кувшинчиками Ботаники описали первое хищное растение с подземными ловчими кувшинчиками

Непентес стыдливый — первое известное хищное растение с подземными кувшинчиками

N+1
Физики подтвердили спин-зарядовое разделение в одномерной квантовой жидкости Физики подтвердили спин-зарядовое разделение в одномерной квантовой жидкости

Физики измерили свойства зарядовых и спиновых волн в одномерной ферми-жидкости

N+1
Ученые секвенировали геном жителя древнеримских Помпей. Он оказался неместным Ученые секвенировали геном жителя древнеримских Помпей. Он оказался неместным

Метод дробовика помог изучить останки жителя древнеримских Помпей

Вокруг света
Счастливы 85% пассажиров: назван оптимальный день недели для полета Счастливы 85% пассажиров: назван оптимальный день недели для полета

Финская компания провела необычное исследование

Вокруг света
Раздражительность и снижение потенции: 8 признаков пивного алкоголизма Раздражительность и снижение потенции: 8 признаков пивного алкоголизма

Врачи и ученые не согласны с любителями пива и просят их не обманывать себя

Psychologies
Вместо Хургады — в полицию: 5 ходовых способов обмана россиян при покупке билетов Вместо Хургады — в полицию: 5 ходовых способов обмана россиян при покупке билетов

Как не попасться на уловки мошенников при планировании путешествия?

Вокруг света
Как сформировать новые полезные привычки? Как сформировать новые полезные привычки?

Как формируются привычки и почему с возрастом нам все сложнее переучиваться?

СНОБ
Нездешняя рыба Нездешняя рыба

Рыбаки все чаще вытаскивают из российских водоемов диковинных, невиданных рыб

Вокруг света
Как вернуться из отпуска на работу и не сойти с ума сразу же: 6 главных правил Как вернуться из отпуска на работу и не сойти с ума сразу же: 6 главных правил

Как сохранить заряд прочности, накопленный за время отпуска?

VOICE
7 признаков абьюзера в отношениях 7 признаков абьюзера в отношениях

Как понять, что ваш партнер совершает насилие, пусть даже не физическое?

Psychologies
Экспедиция на Иссык-Куль: как древние разломы земной коры помогают ученым прогнозировать периодичность землетрясений Экспедиция на Иссык-Куль: как древние разломы земной коры помогают ученым прогнозировать периодичность землетрясений

Ученые обнаружили древние землетрясения на северном побережье Иссык-Куля

ТехИнсайдер
Кто такие зомби Кто такие зомби

Эволюция от послушных рабов к агрессивной нежити

Вокруг света
Путин и золото: как британский миллионер судился из-за «русского следа» в Brexit Путин и золото: как британский миллионер судился из-за «русского следа» в Brexit

Как Аррон Бэнкс сколотил состояние, увлекся политикой и потратился на Brexit

Forbes
Генрих Остерман: как немецкий дуэлянт стал серым кардиналом Анны Оиоанновны Генрих Остерман: как немецкий дуэлянт стал серым кардиналом Анны Оиоанновны

Из-за какой-то драки, шестнадцатилетний студент стал первым министром России

ТехИнсайдер
Чувствуют агрессию: выявлена способность животных распознавать эмоции людей Чувствуют агрессию: выявлена способность животных распознавать эмоции людей

Лошади и свиньи оказались куда более проницательны, чем считалось раньше

Вокруг света
10 книг, из-за которых ты снова полюбишь читать 10 книг, из-за которых ты снова полюбишь читать

Смотришь с отвращением на всю литературу ещё со школы?

Maxim
Виктор Франкл: в чем смысл нашей жизни и зачем в ней страдания Виктор Франкл: в чем смысл нашей жизни и зачем в ней страдания

В чем же смысл жизни?

Вокруг света
Строим автомобиль для ралли-рейда: зачем спорткарам нужен каркас безопасности и каким он должен быть Строим автомобиль для ралли-рейда: зачем спорткарам нужен каркас безопасности и каким он должен быть

Как построить каркас безопасности для спортивных классов N2?

ТехИнсайдер
Кубик в кубе Кубик в кубе

Даже если вы не видели Ольгу Кравцову и Руслана Габидуллина, вы любите их голоса

Собака.ru
Отрывок из романа Александра Стесина «Троя против всех» Отрывок из романа Александра Стесина «Троя против всех»

Первая глава «романа о воспитании» «Троя против всех» Александра Стесина

СНОБ
Открыть в приложении