Отрывок из книги «Полный бред! Скептицизм в мире больших данных»

N+1Наука

«Полный бред! Скептицизм в мире больших данных». Как относиться к получаемой информации критически

Манн, Иванов и Фербер, научно-популярные книгоиздатели

Если кто-то подкрепляет утверждения затейливыми терминами, цифрами и красивыми графиками, это еще не значит, что ему можно доверять. Статистика и язык точных наук могут быть всего лишь инструментами, призванными скрыть обман. Тот, кто умеет анализировать и перепроверять информацию, скорее всего, заметит подвох — остальные рискуют попасться в ловушку. В книге «Полный бред! Скептицизм в мире больших данных» (издательство «Манн, Иванов и Фербер»), переведенной на русский Елизаветой Пономаревой, ученые Карл Бергстром и Джевин Уэст рассказывают, как распознать чушь (в оригинале — bullshit) и почему для этого совсем не обязательно быть специалистом, а достаточно воспользоваться обыкновенной логикой. Предлагаем вам ознакомиться с фрагментом, посвященным «ошибке прокурора» и уровню значимости (p-value).

Ошибка прокурора

Как мы видели, в большинстве научных исследований ищут закономерности в данных, позволяющие делать выводы о мире. Но как отличить закономерность от случайного шума? И как определить, насколько она значима? Существует несколько способов это сделать, и самый распространенный — это использование р-значения. Грубо говоря, р-значение указывает, насколько вероятно, что наблюдаемая закономерность возникла по чистой случайности. Если это маловероятно, то мы можем сказать, что результат статистически значим. Но что это на самом деле означает и как нам трактовать р-значение? Мы ответим на эти вопросы с помощью короткой истории.

Представьте, что вы известный адвокат, который защищает скромного биолога, обвиняемого в самом поразительном похищении предмета искусства в современной истории.

Это сенсационное преступление. Богатая собирательница отправила частную коллекцию из тридцати шедевров европейского искусства на охраняемом поезде из своего особняка в Санта-Кларе в аукционный дом в Нью-Йорке. Когда поезд достиг пункта назначения, коробки отнесли в аукционный дом для распаковки. Путешествие прошло без происшествий, и к коробкам, на первый взгляд, никто не прикасался. Но, к всеобщему ужасу, четыре самые ценные картины были вырезаны из рам и исчезли! Ни полиция, ни страховая компания не нашли ни единой улики, не считая единственного отпечатка пальца на раме одной из пропавших работ. Украденные шедевры так никогда и не отыскали.

При отсутствии каких-либо иных наметок полиция прогнала от печаток пальца через огромную базу данных ФБР и нашла совпадение — отпечаток вашего клиента. (Он сдал свои отпечатки Администрации транспортной безопасности в обмен на возможность проходить досмотр в аэропорту, не снимая ботинок.) На допросе выяснилось, что у вашего клиента нет алиби. Он утверждает, что ни с кем не контактировал две недели, пока выслеживал окольцованную куропатку в горах Высокая Сьерра в рамках научного проекта.

Несмотря на отсутствие алиби, вы уверены, что ваш клиент не может быть виновен. Он всего лишь застенчивый ученый, а не хладнокровный похититель шедевров. У него уже есть два гранта NSF на исследование размножения куропаток, и, похоже, он не нуждается в дополнительных источниках дохода. К тому же, насколько вы заметили, он ни черта не понимает в искусстве; да что там, он считает, что Донателло — это черепашка-ниндзя.

Тем не менее начинается судебный процесс, и вы сталкиваетесь с блестящей молодой звездой прокуратуры. После описания всех остальных доказательств вины вашего клиента — слабых и косвенных — прокурор переходит к своему козырю, отпечатку пальца. Прокурор рассказывает присяжным, как именно компьютер сопоставляет отпечатки пальцев, и завершает свое выступление словами: «Нет абсолютно никаких шансов случайного совпадения настолько идентичных отпечатков».

Вы опровергаете его заявление: «По вашим словам, нет абсолютно никаких шансов настолько точного совпадения. Но так не бывает. В каждом тесте есть по крайней мере небольшой шанс ошибки». — «Конечно, — уступает он, — в принципе, тесты могут ошибаться. Но на практике шанс, что это случится, нулевой. Исследования ФБР показывают, что существует один шанс на десять миллионов, что два отпечатка совпадут настолько же точно. Один на десять миллионов — тут нет места сомнениям!»

Именно этого вы и ждали. Вы обращаетесь к присяжным и рисуете таблицу на три строки и два столбца на большом листе бумаги. Выглядит она примерно вот так.

«Я думаю, все мы согласны, что это преступление было кем-то совершено. И давайте также предположим, что отпечатки виновного есть в базе данных. Может быть, и нет, — обращаетесь вы к прокурору, — но это ослабит ваши доказательства. Так что давайте предположим, что они есть в базе». Прокурор кивает. «Тогда таблица должна выглядеть примерно вот так». Вы заполняете верхний ряд большим красным маркером.

Повернувшись к прокурору, вы интересуетесь: «Сколько человек включены в эту вашу базу ФБР?» Он перебивает вас: «Возражение, Ваша честь! Какое отношение это имеет к делу?» — «В этом и есть вся суть дела, — объясняете вы. — Я убежден, что объясню это все в течение следующих нескольких минут». — «Возражение отклонено». Сторона обвинения признается, что, если учесть все отпечатки пальцев преступников в США, все отпечатки гражданских лиц, полученные при проверке их биографий, и все отпечатки из базы Администрации транспортной безопасности, в базе представлено приблизительно пятьдесят миллионов американцев. И конечно, большинство отпечатков в базе не совпадают с тем, что найден на раме.

«Итак, теперь мы можем заполнять таблицу дальше», — говорите вы и вписываете число 50 000 000 в нижний правый угол.

Теперь вы указываете на нижний левый угол (это невиновные люди, чьи отпечатки тем не менее совпадут с найденным) и спрашиваете: «Как вы думаете, что нужно вписать сюда?»

Вы смотрите прямо на прокурора. «Вы сказали, что существует один шанс на десять миллионов, что алгоритм нашел неправильное совпадение. Это значит, что среди пятидесяти миллионов человек в этой базе должно быть примерно пять, чьи отпечатки совпадают с найденным и на месте преступления. Так что давайте заполним таблицу следующим образом»

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

«Биология в фокусе: Естественные отделения университетов Российской империи (1830–1900)» «Биология в фокусе: Естественные отделения университетов Российской империи (1830–1900)»

Почему в начале XIX века в университетах было мало практических занятий

N+1
Что ждет женщину в 50 лет: мудрые слова Шэрон Стоун о старении Что ждет женщину в 50 лет: мудрые слова Шэрон Стоун о старении

Шэрон Стоун стала примером для миллионов женщин

VOICE
Секвенирование ДНК из воздуха сообщило о составе биомов и человеческих популяций Секвенирование ДНК из воздуха сообщило о составе биомов и человеческих популяций

Секвенирование ДНК как способ быстрого и неинвазивного анализа биомов

N+1
«Меня надо наказать за эту жизнь»: Джейн Биркин о токсичных отношениях «Меня надо наказать за эту жизнь»: Джейн Биркин о токсичных отношениях

Отрывок из «Дневника обезьянки» — автобиографической книги Джейн Биркин

Forbes
Развод и утрата: как справиться с последствиями Развод и утрата: как справиться с последствиями

Как утрата влияет на наше психологическое состояние?

VOICE
Вспоминаем хорошие книги: 5 громких новинок научной фантастики 2018 года Вспоминаем хорошие книги: 5 громких новинок научной фантастики 2018 года

Романы, которые позволят взглянуть на фантастические варианты будущего

ТехИнсайдер
Летящие насквозь Летящие насквозь

Каждое мгновение нейтрино триллионами пронзают наши тела

Вокруг света
Барнаульский археолог описал парное погребение в кургане пазырыкской региональной элиты Барнаульский археолог описал парное погребение в кургане пазырыкской региональной элиты

Под насыпью в Ханкаринском Доле находилась могила двух людей и семи коней

N+1
Ботаники описали первое хищное растение с подземными ловчими кувшинчиками Ботаники описали первое хищное растение с подземными ловчими кувшинчиками

Непентес стыдливый — первое известное хищное растение с подземными кувшинчиками

N+1
«Считаю себя некрасивой»: нормально ли это? «Считаю себя некрасивой»: нормально ли это?

Как увидеть и открыть истинную красоту в себе?

Psychologies
Лиза Янковская — о главной роли в фильме «Ника» Лиза Янковская — о главной роли в фильме «Ника»

Разговор c Лизой Янковской, которая сыграла вундеркинда-поэтессу Нику Турбину

СНОБ
Бари Алибасов: «Моя жизнь — сплошная провокация» Бари Алибасов: «Моя жизнь — сплошная провокация»

Выступая перед публикой, я играю роль, а с моей сутью знакомы лишь близкие люди

Караван историй
Флагман отрасли Флагман отрасли

Как холдинг ERSO развивает российский рынок электротехники

Наука
Для чего древние цивилизации использовали календари? 5 невероятных фактов о времени Для чего древние цивилизации использовали календари? 5 невероятных фактов о времени

Факты, связанные со временем, которые вы точно не знали

ТехИнсайдер
Упрощенная Granta и еще 12 самых дешевых машин в России. Список и цены Упрощенная Granta и еще 12 самых дешевых машин в России. Список и цены

Сколько стоят самые доступные автомобили, которые можно купить прямо сейчас

РБК
Как распознать мошенников в стоматологии Как распознать мошенников в стоматологии

Возможно, в клинике, к которой ты присматриваешься, не стоит лечить зубы

Лиза
Ремонт без хлопот: Будь проще и… сэкономишь Ремонт без хлопот: Будь проще и… сэкономишь

От чего следует отказаться, чтобы снизить затраты на ремонт

Лиза
Дела семейные Дела семейные

Наши герои, которые не побоялись построить бизнес с близкими

Seasons of life
«Трусливый страх перед приговорами Европы» «Трусливый страх перед приговорами Европы»

Как Петр I, подняв Россию на дыбы, поставил ее на колени

Weekend
Как стать везунчиком: психологи назвали 10 способов приманить к себе удачу Как стать везунчиком: психологи назвали 10 способов приманить к себе удачу

На самом деле везучесть — это своего рода скилл, который тоже можно «прокачать»

Psychologies
Максим Петров, Юлдус Бахтиозина, Константин Бинкин Максим Петров, Юлдус Бахтиозина, Константин Бинкин

Как создавался первый мультимедийный спектакль Мариинского театра?

Собака.ru
Археологи нашли в Паленке отрубленную каменную голову молодого бога кукурузы Археологи нашли в Паленке отрубленную каменную голову молодого бога кукурузы

Археологи обнаружили свидетельство ритуала, совершенного около 1300 лет назад

N+1
Что делать, если девушка вдруг стала зарабатывать больше тебя? Что делать, если девушка вдруг стала зарабатывать больше тебя?

Небольшой гайд, как свыкнуться с потерей звания «кормилец»

Maxim
А где наш папа? Звездные матери, которые скрывают отцов своих детей А где наш папа? Звездные матери, которые скрывают отцов своих детей

Не все знаменитости привыкли выставлять свою личную жизнь на всеобщее обозрение

VOICE
5 крутых возможностей вакуумного упаковщика 5 крутых возможностей вакуумного упаковщика

Мы нашли целых 5 причин купить вакууматор

CHIP
30 лучших фэнтези-фильмов всех времен 30 лучших фэнтези-фильмов всех времен

Поставьте реальность на паузу и позвольте себе раствориться в фантастике

Правила жизни
У клещей, живущих на лице человека, обнаружили анусы — и это далеко не все поразительные открытия У клещей, живущих на лице человека, обнаружили анусы — и это далеко не все поразительные открытия

Ученые разгадали генетические секреты самых тесных соседей человечества

ТехИнсайдер
Татьяна Кочнова Татьяна Кочнова

Дизайнер Татьяна Кочнова совершила переворот в свадебной моде

Собака.ru
«Тревога имеет смысл»: как его найти? «Тревога имеет смысл»: как его найти?

Предлагаем вам взгляд на тревогу с позиции экзистенциальных психологов

Psychologies
Любовь, смерть и самолеты: в повторный прокат выходит «Ветер крепчает» Миядзаки Любовь, смерть и самолеты: в повторный прокат выходит «Ветер крепчает» Миядзаки

«Ветер крепчает» — мультфильм про хрупкость жизни и бессмысленность войны

Forbes
Открыть в приложении