Отрывок из книги «Полный бред! Скептицизм в мире больших данных»

N+1Наука

«Полный бред! Скептицизм в мире больших данных». Как относиться к получаемой информации критически

Манн, Иванов и Фербер, научно-популярные книгоиздатели

Если кто-то подкрепляет утверждения затейливыми терминами, цифрами и красивыми графиками, это еще не значит, что ему можно доверять. Статистика и язык точных наук могут быть всего лишь инструментами, призванными скрыть обман. Тот, кто умеет анализировать и перепроверять информацию, скорее всего, заметит подвох — остальные рискуют попасться в ловушку. В книге «Полный бред! Скептицизм в мире больших данных» (издательство «Манн, Иванов и Фербер»), переведенной на русский Елизаветой Пономаревой, ученые Карл Бергстром и Джевин Уэст рассказывают, как распознать чушь (в оригинале — bullshit) и почему для этого совсем не обязательно быть специалистом, а достаточно воспользоваться обыкновенной логикой. Предлагаем вам ознакомиться с фрагментом, посвященным «ошибке прокурора» и уровню значимости (p-value).

Ошибка прокурора

Как мы видели, в большинстве научных исследований ищут закономерности в данных, позволяющие делать выводы о мире. Но как отличить закономерность от случайного шума? И как определить, насколько она значима? Существует несколько способов это сделать, и самый распространенный — это использование р-значения. Грубо говоря, р-значение указывает, насколько вероятно, что наблюдаемая закономерность возникла по чистой случайности. Если это маловероятно, то мы можем сказать, что результат статистически значим. Но что это на самом деле означает и как нам трактовать р-значение? Мы ответим на эти вопросы с помощью короткой истории.

Представьте, что вы известный адвокат, который защищает скромного биолога, обвиняемого в самом поразительном похищении предмета искусства в современной истории.

Это сенсационное преступление. Богатая собирательница отправила частную коллекцию из тридцати шедевров европейского искусства на охраняемом поезде из своего особняка в Санта-Кларе в аукционный дом в Нью-Йорке. Когда поезд достиг пункта назначения, коробки отнесли в аукционный дом для распаковки. Путешествие прошло без происшествий, и к коробкам, на первый взгляд, никто не прикасался. Но, к всеобщему ужасу, четыре самые ценные картины были вырезаны из рам и исчезли! Ни полиция, ни страховая компания не нашли ни единой улики, не считая единственного отпечатка пальца на раме одной из пропавших работ. Украденные шедевры так никогда и не отыскали.

При отсутствии каких-либо иных наметок полиция прогнала от печаток пальца через огромную базу данных ФБР и нашла совпадение — отпечаток вашего клиента. (Он сдал свои отпечатки Администрации транспортной безопасности в обмен на возможность проходить досмотр в аэропорту, не снимая ботинок.) На допросе выяснилось, что у вашего клиента нет алиби. Он утверждает, что ни с кем не контактировал две недели, пока выслеживал окольцованную куропатку в горах Высокая Сьерра в рамках научного проекта.

Несмотря на отсутствие алиби, вы уверены, что ваш клиент не может быть виновен. Он всего лишь застенчивый ученый, а не хладнокровный похититель шедевров. У него уже есть два гранта NSF на исследование размножения куропаток, и, похоже, он не нуждается в дополнительных источниках дохода. К тому же, насколько вы заметили, он ни черта не понимает в искусстве; да что там, он считает, что Донателло — это черепашка-ниндзя.

Тем не менее начинается судебный процесс, и вы сталкиваетесь с блестящей молодой звездой прокуратуры. После описания всех остальных доказательств вины вашего клиента — слабых и косвенных — прокурор переходит к своему козырю, отпечатку пальца. Прокурор рассказывает присяжным, как именно компьютер сопоставляет отпечатки пальцев, и завершает свое выступление словами: «Нет абсолютно никаких шансов случайного совпадения настолько идентичных отпечатков».

Вы опровергаете его заявление: «По вашим словам, нет абсолютно никаких шансов настолько точного совпадения. Но так не бывает. В каждом тесте есть по крайней мере небольшой шанс ошибки». — «Конечно, — уступает он, — в принципе, тесты могут ошибаться. Но на практике шанс, что это случится, нулевой. Исследования ФБР показывают, что существует один шанс на десять миллионов, что два отпечатка совпадут настолько же точно. Один на десять миллионов — тут нет места сомнениям!»

Именно этого вы и ждали. Вы обращаетесь к присяжным и рисуете таблицу на три строки и два столбца на большом листе бумаги. Выглядит она примерно вот так.

«Я думаю, все мы согласны, что это преступление было кем-то совершено. И давайте также предположим, что отпечатки виновного есть в базе данных. Может быть, и нет, — обращаетесь вы к прокурору, — но это ослабит ваши доказательства. Так что давайте предположим, что они есть в базе». Прокурор кивает. «Тогда таблица должна выглядеть примерно вот так». Вы заполняете верхний ряд большим красным маркером.

Повернувшись к прокурору, вы интересуетесь: «Сколько человек включены в эту вашу базу ФБР?» Он перебивает вас: «Возражение, Ваша честь! Какое отношение это имеет к делу?» — «В этом и есть вся суть дела, — объясняете вы. — Я убежден, что объясню это все в течение следующих нескольких минут». — «Возражение отклонено». Сторона обвинения признается, что, если учесть все отпечатки пальцев преступников в США, все отпечатки гражданских лиц, полученные при проверке их биографий, и все отпечатки из базы Администрации транспортной безопасности, в базе представлено приблизительно пятьдесят миллионов американцев. И конечно, большинство отпечатков в базе не совпадают с тем, что найден на раме.

«Итак, теперь мы можем заполнять таблицу дальше», — говорите вы и вписываете число 50 000 000 в нижний правый угол.

Теперь вы указываете на нижний левый угол (это невиновные люди, чьи отпечатки тем не менее совпадут с найденным) и спрашиваете: «Как вы думаете, что нужно вписать сюда?»

Вы смотрите прямо на прокурора. «Вы сказали, что существует один шанс на десять миллионов, что алгоритм нашел неправильное совпадение. Это значит, что среди пятидесяти миллионов человек в этой базе должно быть примерно пять, чьи отпечатки совпадают с найденным и на месте преступления. Так что давайте заполним таблицу следующим образом»

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

«Путеводитель по Средневековью: Мир глазами ученых, шпионов, купцов и паломников» «Путеводитель по Средневековью: Мир глазами ученых, шпионов, купцов и паломников»

Каково было совершать паломничество на борту галеи

N+1
«Менять надо не людей, а систему»: почему кризис может привести к росту бездомности «Менять надо не людей, а систему»: почему кризис может привести к росту бездомности

О помощи беженцам и безработным, об уходе крупных доноров с российского рынка

Forbes
РНК нейрональных предшественников в гиппокампе указала на нейрогенез у взрослых РНК нейрональных предшественников в гиппокампе указала на нейрогенез у взрослых

Как ученые подтвердили нейрогенез у взрослых

N+1
Над волнами – на электричестве Над волнами – на электричестве

RaceBird специально разработан для скоростных гонок

ТехИнсайдер
Пластичность мозга Пластичность мозга

Потрясающие факты о том, как мысли способны менять структуру и функции мозга

kiozk originals
Предсказуемо яркая мегазвезда: Дженнифер Лопес в фильме «Половина» Предсказуемо яркая мегазвезда: Дженнифер Лопес в фильме «Половина»

Фильм о Дженнифер Лопес и пути, который она прошла за почти 30-летнюю карьеру

Forbes
О чем поется в 10 самых популярных иностранных песнях О чем поется в 10 самых популярных иностранных песнях

Раскрываем суть шлягеров Queen, Depeche Mode, Rammstein и т.д

Maxim
Гонки на колеснице и типичный кельт: археологи изучили найденные под Анапой редкие перстни Гонки на колеснице и типичный кельт: археологи изучили найденные под Анапой редкие перстни

В Краснодарском крае нашли артефакты, которые редко встречаются в этих местах

Вокруг света
5 самых скандальных фото-фейков в истории 5 самых скандальных фото-фейков в истории

Самые скандальные фото-фейки из тех, что известны на сегодня

ТехИнсайдер
Каким должен быть современный мужчина: россиянки назвали привлекающее их качество Каким должен быть современный мужчина: россиянки назвали привлекающее их качество

Наиболее популярные качества, которые женщины ценят в мужчинах

Psychologies
Подключить нельзя запретить: когда на производствах появятся «цифровые работники» Подключить нельзя запретить: когда на производствах появятся «цифровые работники»

Как оптимизировать отдельные участки, процессы и сценарии на заводе?

ТехИнсайдер
Тахограф: что это, как пользоваться, какие штрафы Тахограф: что это, как пользоваться, какие штрафы

Строгий надсмотрщик или помощник водителя? Мнения о тахографе полярны

РБК
Любовь в деталях Любовь в деталях

Как найти баланс в общении с мужчиной?

Лиза
О чем не сняли кино: настоящие приключения графа Калиостро в России О чем не сняли кино: настоящие приключения графа Калиостро в России

Дорог в жизни Алессандро Калиостро было великое множество

Вокруг света
Портал Портал

На вокзалах ежечасно вершатся судьбы

Seasons of life
Из Китая с любовью: 10 популярных новинок китайского автопрома в 2022 году Из Китая с любовью: 10 популярных новинок китайского автопрома в 2022 году

Кроссоверы, на которые стоит обратить внимание

ТехИнсайдер
Живой будильник: почему петухи кричат по утрам Живой будильник: почему петухи кричат по утрам

Утренний крик петуха был первым будильником, который появился у человека

ТехИнсайдер
«Медвежья болезнь»: как кишечник командует нашим поведением и настроением «Медвежья болезнь»: как кишечник командует нашим поведением и настроением

Оказывается, вовсе не мозг и не желудок требуют от нас купить шоколадку

Psychologies
Кто меня укусил: распознаем насекомое по месту укуса Кто меня укусил: распознаем насекомое по месту укуса

Познавательный экскурс в мир укусов насекомых

ТехИнсайдер
Как сетка квадратов стала первой утопией Как сетка квадратов стала первой утопией

Гипподам и «Гипподамова планировка»

Weekend
Срединный путь Срединный путь

Основательница ювелирного бренда — что меняется, когда твоя команда вырастает?

Seasons of life
Свободное падение Свободное падение

Как купающиеся марсельские докеры вдохновили на революционные изменения

Вокруг света
Физики уточнили изотопический сдвиг g-фактора водородоподобного неона Физики уточнили изотопический сдвиг g-фактора водородоподобного неона

Сверхточное измерение изотопического сдвига g-фактора водородоподобного неона

N+1
Оба нано: история двух создателей батарей для электрокаров — с началом в одно время и очень разными концами Оба нано: история двух создателей батарей для электрокаров — с началом в одно время и очень разными концами

Два проекта запустились в один год, в одной и той же сфере — кто будет успешнее

VC.RU
Пиво, сало и еще 6 продуктов, которые на самом деле полезны для сердца Пиво, сало и еще 6 продуктов, которые на самом деле полезны для сердца

Какие продукты полезны для здоровья сердца и сосудов?

ТехИнсайдер
Место для созерцания: как создать японский сад на своем дачном участке Место для созерцания: как создать японский сад на своем дачном участке

Сажать сакуру для японского сада вовсе не обязательно

Вокруг света
Археологи разобрались в хронологии испанского памятника с палеолитическим искусством Археологи разобрались в хронологии испанского памятника с палеолитическим искусством

Ученые получили 62 радиоизотопные датировки материалов из пещеры Ардалес

N+1
Что такое параллельный импорт и как он работает? Что такое параллельный импорт и как он работает?

Что такое параллельный импорт, в чем его плюсы и минусы?

Правила жизни
5 самых ядовитых грибов в мире: не смейте даже прикасаться к ним 5 самых ядовитых грибов в мире: не смейте даже прикасаться к ним

Собирая грибы в лесу, важно быть начеку

ТехИнсайдер
Самые ревнивые звездные девушки Голливуда: Джоли, Кардашьян, Кунис и другие Самые ревнивые звездные девушки Голливуда: Джоли, Кардашьян, Кунис и другие

Иногда ревность становится настоящей проблемой для звездных влюбленных пар

VOICE
Открыть в приложении