Отрывок из книги «Полный бред! Скептицизм в мире больших данных»

N+1Наука

«Полный бред! Скептицизм в мире больших данных». Как относиться к получаемой информации критически

Манн, Иванов и Фербер, научно-популярные книгоиздатели

Если кто-то подкрепляет утверждения затейливыми терминами, цифрами и красивыми графиками, это еще не значит, что ему можно доверять. Статистика и язык точных наук могут быть всего лишь инструментами, призванными скрыть обман. Тот, кто умеет анализировать и перепроверять информацию, скорее всего, заметит подвох — остальные рискуют попасться в ловушку. В книге «Полный бред! Скептицизм в мире больших данных» (издательство «Манн, Иванов и Фербер»), переведенной на русский Елизаветой Пономаревой, ученые Карл Бергстром и Джевин Уэст рассказывают, как распознать чушь (в оригинале — bullshit) и почему для этого совсем не обязательно быть специалистом, а достаточно воспользоваться обыкновенной логикой. Предлагаем вам ознакомиться с фрагментом, посвященным «ошибке прокурора» и уровню значимости (p-value).

Ошибка прокурора

Как мы видели, в большинстве научных исследований ищут закономерности в данных, позволяющие делать выводы о мире. Но как отличить закономерность от случайного шума? И как определить, насколько она значима? Существует несколько способов это сделать, и самый распространенный — это использование р-значения. Грубо говоря, р-значение указывает, насколько вероятно, что наблюдаемая закономерность возникла по чистой случайности. Если это маловероятно, то мы можем сказать, что результат статистически значим. Но что это на самом деле означает и как нам трактовать р-значение? Мы ответим на эти вопросы с помощью короткой истории.

Представьте, что вы известный адвокат, который защищает скромного биолога, обвиняемого в самом поразительном похищении предмета искусства в современной истории.

Это сенсационное преступление. Богатая собирательница отправила частную коллекцию из тридцати шедевров европейского искусства на охраняемом поезде из своего особняка в Санта-Кларе в аукционный дом в Нью-Йорке. Когда поезд достиг пункта назначения, коробки отнесли в аукционный дом для распаковки. Путешествие прошло без происшествий, и к коробкам, на первый взгляд, никто не прикасался. Но, к всеобщему ужасу, четыре самые ценные картины были вырезаны из рам и исчезли! Ни полиция, ни страховая компания не нашли ни единой улики, не считая единственного отпечатка пальца на раме одной из пропавших работ. Украденные шедевры так никогда и не отыскали.

При отсутствии каких-либо иных наметок полиция прогнала от печаток пальца через огромную базу данных ФБР и нашла совпадение — отпечаток вашего клиента. (Он сдал свои отпечатки Администрации транспортной безопасности в обмен на возможность проходить досмотр в аэропорту, не снимая ботинок.) На допросе выяснилось, что у вашего клиента нет алиби. Он утверждает, что ни с кем не контактировал две недели, пока выслеживал окольцованную куропатку в горах Высокая Сьерра в рамках научного проекта.

Несмотря на отсутствие алиби, вы уверены, что ваш клиент не может быть виновен. Он всего лишь застенчивый ученый, а не хладнокровный похититель шедевров. У него уже есть два гранта NSF на исследование размножения куропаток, и, похоже, он не нуждается в дополнительных источниках дохода. К тому же, насколько вы заметили, он ни черта не понимает в искусстве; да что там, он считает, что Донателло — это черепашка-ниндзя.

Тем не менее начинается судебный процесс, и вы сталкиваетесь с блестящей молодой звездой прокуратуры. После описания всех остальных доказательств вины вашего клиента — слабых и косвенных — прокурор переходит к своему козырю, отпечатку пальца. Прокурор рассказывает присяжным, как именно компьютер сопоставляет отпечатки пальцев, и завершает свое выступление словами: «Нет абсолютно никаких шансов случайного совпадения настолько идентичных отпечатков».

Вы опровергаете его заявление: «По вашим словам, нет абсолютно никаких шансов настолько точного совпадения. Но так не бывает. В каждом тесте есть по крайней мере небольшой шанс ошибки». — «Конечно, — уступает он, — в принципе, тесты могут ошибаться. Но на практике шанс, что это случится, нулевой. Исследования ФБР показывают, что существует один шанс на десять миллионов, что два отпечатка совпадут настолько же точно. Один на десять миллионов — тут нет места сомнениям!»

Именно этого вы и ждали. Вы обращаетесь к присяжным и рисуете таблицу на три строки и два столбца на большом листе бумаги. Выглядит она примерно вот так.

«Я думаю, все мы согласны, что это преступление было кем-то совершено. И давайте также предположим, что отпечатки виновного есть в базе данных. Может быть, и нет, — обращаетесь вы к прокурору, — но это ослабит ваши доказательства. Так что давайте предположим, что они есть в базе». Прокурор кивает. «Тогда таблица должна выглядеть примерно вот так». Вы заполняете верхний ряд большим красным маркером.

Повернувшись к прокурору, вы интересуетесь: «Сколько человек включены в эту вашу базу ФБР?» Он перебивает вас: «Возражение, Ваша честь! Какое отношение это имеет к делу?» — «В этом и есть вся суть дела, — объясняете вы. — Я убежден, что объясню это все в течение следующих нескольких минут». — «Возражение отклонено». Сторона обвинения признается, что, если учесть все отпечатки пальцев преступников в США, все отпечатки гражданских лиц, полученные при проверке их биографий, и все отпечатки из базы Администрации транспортной безопасности, в базе представлено приблизительно пятьдесят миллионов американцев. И конечно, большинство отпечатков в базе не совпадают с тем, что найден на раме.

«Итак, теперь мы можем заполнять таблицу дальше», — говорите вы и вписываете число 50 000 000 в нижний правый угол.

Теперь вы указываете на нижний левый угол (это невиновные люди, чьи отпечатки тем не менее совпадут с найденным) и спрашиваете: «Как вы думаете, что нужно вписать сюда?»

Вы смотрите прямо на прокурора. «Вы сказали, что существует один шанс на десять миллионов, что алгоритм нашел неправильное совпадение. Это значит, что среди пятидесяти миллионов человек в этой базе должно быть примерно пять, чьи отпечатки совпадают с найденным и на месте преступления. Так что давайте заполним таблицу следующим образом»

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Неустойчивость Рэлея — Плато заставила квантовую жидкость разделиться на капли Неустойчивость Рэлея — Плато заставила квантовую жидкость разделиться на капли

Физики увидели, как квантовая жидкость разделилась на несколько отдельных капель

N+1
По ту сторону реки По ту сторону реки

Культурный посредник, переводчик, доула и гид объясняют свою миссию

Seasons of life
Сразу две частные компании стартовали к Луне на одной ракете Сразу две частные компании стартовали к Луне на одной ракете

Две частные фирмы запустили аппараты на Луну в ракете SpaceX Falcon 9

ТехИнсайдер
Что делать для сохранения ментального здоровья: советы и лайфхаки от психолога Что делать для сохранения ментального здоровья: советы и лайфхаки от психолога

Чувствуешь, что уже "не вывозишь"? Что же делать?

VOICE
От шелка до кремния От шелка до кремния

10 лидеров, которые объединили мир

kiozk originals
Вся власть доносам Вся власть доносам

Как донос стал частью российской государственности

Weekend
Алкомаркеты пустые, проезд в метро — 6 рублей: впечатления россиянина от жизни в Ташкенте Алкомаркеты пустые, проезд в метро — 6 рублей: впечатления россиянина от жизни в Ташкенте

Переехавший из Новосибирска рассказал, чем живет среднеазиатский мегаполис

Вокруг света
Зоологи не нашли различий в средней скорости старения холоднокровных и теплокровных тетрапод Зоологи не нашли различий в средней скорости старения холоднокровных и теплокровных тетрапод

Одни виды амфибий и рептилий стареют медленнее, чем птицы и млекопитающие

N+1
Островной инстинкт: трагедии и триумфы королевы Виктории Островной инстинкт: трагедии и триумфы королевы Виктории

Первый день правления королевы Виктории стал для нее настоящим испытанием

Вокруг света
Черный дым из выхлопной трубы: причины и способы их устранения Черный дым из выхлопной трубы: причины и способы их устранения

О каких «заболеваниях» ДВС свидетельствует черный дым?

РБК
Пойманный в Камбодже скат оказался крупнейшей пресноводной рыбой Пойманный в Камбодже скат оказался крупнейшей пресноводной рыбой

Рыбак поймал в реке Меконг гигантского ската с длиной тела около четырех метров

N+1
Неслучайны связи Неслучайны связи

Мы поговорили с создателями трех тревел-проектов о том, как искать «своих»

Seasons of life
Мемуары творческих людей как источник вдохновения Мемуары творческих людей как источник вдохновения

Подборка книг, написанных известными людьми творческих профессий

СНОБ
11 вещей, которые в России пока еще лучше, чем в США 11 вещей, которые в России пока еще лучше, чем в США

Список, от которого гордость встает дыбом на голове!

Maxim
Почему вообще не хочется отношений с противоположным полом: 5 причин Почему вообще не хочется отношений с противоположным полом: 5 причин

Если вам не хочется отношений, это нормально

Psychologies
Жизнь после развода: как стать самодостаточным мужчиной и хорошим отцом Жизнь после развода: как стать самодостаточным мужчиной и хорошим отцом

Развод может стать настоящим испытанием на прочность не только для женщины

Forbes
Физики достоверно увидели тетранейтрон Физики достоверно увидели тетранейтрон

Увиденный физиками тетранейтрон оказался резонансом

N+1
Как детская викторина: этот простой тест указывает на опухоль мозга с вероятностью 87,5% Как детская викторина: этот простой тест указывает на опухоль мозга с вероятностью 87,5%

Этот тест рекомендуют проводить пациентам с головной болью

Вокруг света
Почему я умная, а живу как дура: вся правда о женских тренингах Почему я умная, а живу как дура: вся правда о женских тренингах

В чем прелесть и опасность массового увлечения женскими тренингами?

Psychologies
Болливудские драмы и MBA из подвала: к чему готовиться предпринимателю в Индии Болливудские драмы и MBA из подвала: к чему готовиться предпринимателю в Индии

Как современному предпринимателю вести бизнес в Индии?

Forbes
Скрытое насилие в отношениях: 8 сигналов, что вы в опасности Скрытое насилие в отношениях: 8 сигналов, что вы в опасности

Восемь признаков скрытого насилия в паре

Psychologies
В год около 100 переездов: 10 фактов, которые удивляют в жизни оленеводов на Ямале В год около 100 переездов: 10 фактов, которые удивляют в жизни оленеводов на Ямале

Представители малых народов совмещают традиции и современные технологии

Вокруг света
Изобретение советских физиков может обеспечить энергией весь мир на миллионы лет Изобретение советских физиков может обеспечить энергией весь мир на миллионы лет

Неисчерпаемая энергия у нас прямо под ногами, только непонятно, как ее достать

ТехИнсайдер
«Никогда не делайте этого для мужчин»: советы онлайн-тренингов комментирует психолог «Никогда не делайте этого для мужчин»: советы онлайн-тренингов комментирует психолог

Что ни при каких обстоятельствах нельзя позволять мужчине?

Psychologies
Не сломать биомашину: как менеджерам и предпринимателям перестать выгорать Не сломать биомашину: как менеджерам и предпринимателям перестать выгорать

Как выработанные привычки помогают не выгорать

Forbes
Как возобновить отношения с бывшим партнером (и стоит ли)? Как возобновить отношения с бывшим партнером (и стоит ли)?

Стоит ли пытаться вернуть бывшего партнера?

Psychologies
Не думайте об оценках: как помочь ребенку освоиться в школе за границей Не думайте об оценках: как помочь ребенку освоиться в школе за границей

Как облегчить ребенку переход в зарубежное учебное заведение и к чему готовиться

Forbes
Огуречное лето Огуречное лето

Что нужно учесть, чтобы собирать огурцы всё лето, а не два месяца?

Наука и жизнь
Евросоюз сделает USB-C обязательным разъемом в гаджетах Евросоюз сделает USB-C обязательным разъемом в гаджетах

С осени 2024 года любой проводной гаджет должен будет оснащаться портом USB-C

N+1
«Медперсонал шептался, что я нечистая»: три истории о жизни с ВИЧ в России «Медперсонал шептался, что я нечистая»: три истории о жизни с ВИЧ в России

Страх, отрицание и принятие: несколько историй людей, живущих с ВИЧ

Psychologies
Открыть в приложении