Отрывок из книги «Полный бред! Скептицизм в мире больших данных»

N+1Наука

«Полный бред! Скептицизм в мире больших данных». Как относиться к получаемой информации критически

Манн, Иванов и Фербер, научно-популярные книгоиздатели

Если кто-то подкрепляет утверждения затейливыми терминами, цифрами и красивыми графиками, это еще не значит, что ему можно доверять. Статистика и язык точных наук могут быть всего лишь инструментами, призванными скрыть обман. Тот, кто умеет анализировать и перепроверять информацию, скорее всего, заметит подвох — остальные рискуют попасться в ловушку. В книге «Полный бред! Скептицизм в мире больших данных» (издательство «Манн, Иванов и Фербер»), переведенной на русский Елизаветой Пономаревой, ученые Карл Бергстром и Джевин Уэст рассказывают, как распознать чушь (в оригинале — bullshit) и почему для этого совсем не обязательно быть специалистом, а достаточно воспользоваться обыкновенной логикой. Предлагаем вам ознакомиться с фрагментом, посвященным «ошибке прокурора» и уровню значимости (p-value).

Ошибка прокурора

Как мы видели, в большинстве научных исследований ищут закономерности в данных, позволяющие делать выводы о мире. Но как отличить закономерность от случайного шума? И как определить, насколько она значима? Существует несколько способов это сделать, и самый распространенный — это использование р-значения. Грубо говоря, р-значение указывает, насколько вероятно, что наблюдаемая закономерность возникла по чистой случайности. Если это маловероятно, то мы можем сказать, что результат статистически значим. Но что это на самом деле означает и как нам трактовать р-значение? Мы ответим на эти вопросы с помощью короткой истории.

Представьте, что вы известный адвокат, который защищает скромного биолога, обвиняемого в самом поразительном похищении предмета искусства в современной истории.

Это сенсационное преступление. Богатая собирательница отправила частную коллекцию из тридцати шедевров европейского искусства на охраняемом поезде из своего особняка в Санта-Кларе в аукционный дом в Нью-Йорке. Когда поезд достиг пункта назначения, коробки отнесли в аукционный дом для распаковки. Путешествие прошло без происшествий, и к коробкам, на первый взгляд, никто не прикасался. Но, к всеобщему ужасу, четыре самые ценные картины были вырезаны из рам и исчезли! Ни полиция, ни страховая компания не нашли ни единой улики, не считая единственного отпечатка пальца на раме одной из пропавших работ. Украденные шедевры так никогда и не отыскали.

При отсутствии каких-либо иных наметок полиция прогнала от печаток пальца через огромную базу данных ФБР и нашла совпадение — отпечаток вашего клиента. (Он сдал свои отпечатки Администрации транспортной безопасности в обмен на возможность проходить досмотр в аэропорту, не снимая ботинок.) На допросе выяснилось, что у вашего клиента нет алиби. Он утверждает, что ни с кем не контактировал две недели, пока выслеживал окольцованную куропатку в горах Высокая Сьерра в рамках научного проекта.

Несмотря на отсутствие алиби, вы уверены, что ваш клиент не может быть виновен. Он всего лишь застенчивый ученый, а не хладнокровный похититель шедевров. У него уже есть два гранта NSF на исследование размножения куропаток, и, похоже, он не нуждается в дополнительных источниках дохода. К тому же, насколько вы заметили, он ни черта не понимает в искусстве; да что там, он считает, что Донателло — это черепашка-ниндзя.

Тем не менее начинается судебный процесс, и вы сталкиваетесь с блестящей молодой звездой прокуратуры. После описания всех остальных доказательств вины вашего клиента — слабых и косвенных — прокурор переходит к своему козырю, отпечатку пальца. Прокурор рассказывает присяжным, как именно компьютер сопоставляет отпечатки пальцев, и завершает свое выступление словами: «Нет абсолютно никаких шансов случайного совпадения настолько идентичных отпечатков».

Вы опровергаете его заявление: «По вашим словам, нет абсолютно никаких шансов настолько точного совпадения. Но так не бывает. В каждом тесте есть по крайней мере небольшой шанс ошибки». — «Конечно, — уступает он, — в принципе, тесты могут ошибаться. Но на практике шанс, что это случится, нулевой. Исследования ФБР показывают, что существует один шанс на десять миллионов, что два отпечатка совпадут настолько же точно. Один на десять миллионов — тут нет места сомнениям!»

Именно этого вы и ждали. Вы обращаетесь к присяжным и рисуете таблицу на три строки и два столбца на большом листе бумаги. Выглядит она примерно вот так.

«Я думаю, все мы согласны, что это преступление было кем-то совершено. И давайте также предположим, что отпечатки виновного есть в базе данных. Может быть, и нет, — обращаетесь вы к прокурору, — но это ослабит ваши доказательства. Так что давайте предположим, что они есть в базе». Прокурор кивает. «Тогда таблица должна выглядеть примерно вот так». Вы заполняете верхний ряд большим красным маркером.

Повернувшись к прокурору, вы интересуетесь: «Сколько человек включены в эту вашу базу ФБР?» Он перебивает вас: «Возражение, Ваша честь! Какое отношение это имеет к делу?» — «В этом и есть вся суть дела, — объясняете вы. — Я убежден, что объясню это все в течение следующих нескольких минут». — «Возражение отклонено». Сторона обвинения признается, что, если учесть все отпечатки пальцев преступников в США, все отпечатки гражданских лиц, полученные при проверке их биографий, и все отпечатки из базы Администрации транспортной безопасности, в базе представлено приблизительно пятьдесят миллионов американцев. И конечно, большинство отпечатков в базе не совпадают с тем, что найден на раме.

«Итак, теперь мы можем заполнять таблицу дальше», — говорите вы и вписываете число 50 000 000 в нижний правый угол.

Теперь вы указываете на нижний левый угол (это невиновные люди, чьи отпечатки тем не менее совпадут с найденным) и спрашиваете: «Как вы думаете, что нужно вписать сюда?»

Вы смотрите прямо на прокурора. «Вы сказали, что существует один шанс на десять миллионов, что алгоритм нашел неправильное совпадение. Это значит, что среди пятидесяти миллионов человек в этой базе должно быть примерно пять, чьи отпечатки совпадают с найденным и на месте преступления. Так что давайте заполним таблицу следующим образом»

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Косатки снова начали носить на голове мертвых лососей Косатки снова начали носить на голове мертвых лососей

Зоологам так и не удалось выяснить, зачем косатки носят лососей на голове

N+1
Какие учреждения появились в России при Петре I. Отрывок из книги Какие учреждения появились в России при Петре I. Отрывок из книги

Отрывок из книги «Люди и учреждения петровской эпохи»

СНОБ
Редкоземельные металлы: что такое, почему редкие и зачем нужны людям Редкоземельные металлы: что такое, почему редкие и зачем нужны людям

Какие металлы считаются редкоземельными и почему получили такое название

ТехИнсайдер
Галактика на ладони: зачем астрономам крупнейшая трехмерная карта Млечного Пути Галактика на ладони: зачем астрономам крупнейшая трехмерная карта Млечного Пути

Эта самая подробная карта Галактики позволит заглянуть в ее прошлое и будущее

Forbes
Психологический портрет: что такое сейфтизм Психологический портрет: что такое сейфтизм

Сейфтизм: что это такое и чего в нем больше — пользы или вреда?

Forbes
Как повысить удовольствие от отпуска: 4 совета Как повысить удовольствие от отпуска: 4 совета

Как продлить ощущение счастья от каникул?

Psychologies
Жизнь вне тела: как искусственный «дом для органов» спас первого пациента Жизнь вне тела: как искусственный «дом для органов» спас первого пациента

Технология может спасти людей, рискующих не дождаться своей очереди на пересадку

Forbes
5 самых ядовитых грибов в мире: не смейте даже прикасаться к ним 5 самых ядовитых грибов в мире: не смейте даже прикасаться к ним

Собирая грибы в лесу, важно быть начеку

ТехИнсайдер
Летний режим Летний режим

Техника летней безопасности

Лиза
Как забыть прошлое и жить настоящим: советы психолога Как забыть прошлое и жить настоящим: советы психолога

Как отпустить прошлое и начать жить настоящим?

Psychologies
«Человеку нужен человек»: как режиссер Купер Рэфф переворачивает каноны жанра драмеди «Человеку нужен человек»: как режиссер Купер Рэфф переворачивает каноны жанра драмеди

Драма «В ритме ча-ча-ча» — второй полнометражный фильм Купера Рэффа

Forbes
В сосуде из тюркского погребения VII века обнаружили просо В сосуде из тюркского погребения VII века обнаружили просо

Археологи исследовали керамический сосуд, случайно найденный на Алтае

N+1
Белые медведи с юго-востока Гренландии из-за нехватки морского льда перешли на пресный Белые медведи с юго-востока Гренландии из-за нехватки морского льда перешли на пресный

Как белые медведи приспосабливаются к глобальному потеплению?

N+1
«Щас спою»: почему перерисовывали волка в мультфильме «Жил-был пес» «Щас спою»: почему перерисовывали волка в мультфильме «Жил-был пес»

Волк из знаменитого мультфильма «Жил-был пес» должен был выглядеть иначе

VOICE
Как формируются привычки и почему с возрастом сложно переучиваться? Как формируются привычки и почему с возрастом сложно переучиваться?

Как формируются привычки, можно ли ими управлять

СНОБ
Завтрак за ноутбуком Завтрак за ноутбуком

Привычки, которые портят домашнюю технику

Лиза
Из истории библиотечных каталогов Из истории библиотечных каталогов

Какими были первые библиотечные каталоги?

Наука и жизнь
«Здесь птицы не поют»: в России нашли способ озеленить «мертвую» землю рядом с заводами «Здесь птицы не поют»: в России нашли способ озеленить «мертвую» землю рядом с заводами

Промышленные отходы помогут восстановить землю рядом с заводами

Вокруг света
Готовим автомобиль к жаркой погоде. 8 советов экспертов Готовим автомобиль к жаркой погоде. 8 советов экспертов

Что стоит взять с собой в дорогу в солнечную погоду?

РБК
Первые соревнования по плаванию проводились в открытом море: 5 шокирующих фактов из истории Олимпийских игр Первые соревнования по плаванию проводились в открытом море: 5 шокирующих фактов из истории Олимпийских игр

Все самое интересное и неизвестное о популярных международных соревнованиях

ТехИнсайдер
Пункт назначения для женщин: как борются с домашним насилием в Северной Осетии Пункт назначения для женщин: как борются с домашним насилием в Северной Осетии

Как столица Северной Осетии стала пунктом спасения для женщин

Forbes
Зачем насекомым хоботки? Зачем насекомым хоботки?

Насекомые приспособлены к условиям обитания лучше большинства других животных

Наука и жизнь
Как узнать, сколько оперативной памяти на компьютере? Как узнать, сколько оперативной памяти на компьютере?

Как узнать, сколько оперативной памяти уже есть в компьютере или ноутбуке?

CHIP
Как избегать секса с самим собой Как избегать секса с самим собой

Алексей Алексенко обсуждает проблемы разделения на два пола

СНОБ
Черный дым из выхлопной трубы: причины и способы их устранения Черный дым из выхлопной трубы: причины и способы их устранения

О каких «заболеваниях» ДВС свидетельствует черный дым?

РБК
Об этих существах сочиняли легенды, но они оказались реальными: 10 самых страшных видов летучих мышей Об этих существах сочиняли легенды, но они оказались реальными: 10 самых страшных видов летучих мышей

От этих рукокрылых стоит держаться подальше

ТехИнсайдер
Болонская система прощается, но не уходит Болонская система прощается, но не уходит

Изменения в высшем образовании неизбежны

Эксперт
Ремонт без хлопот: Будь проще и… сэкономишь Ремонт без хлопот: Будь проще и… сэкономишь

От чего следует отказаться, чтобы снизить затраты на ремонт

Лиза
Железная река Сибири: как Транссибирская магистраль изменила Россию Железная река Сибири: как Транссибирская магистраль изменила Россию

Постройка Транссибирской магистрали была подвигом

Вокруг света
Авторка и докторка: почему важно использовать феминитивы? Авторка и докторка: почему важно использовать феминитивы?

Как лучше сказать, адвокатка или адвокатша? Почему это имеет какое-то значение?

Psychologies
Открыть в приложении