К чему могут привести манипуляции ученых

ForbesНаука

От фактов к фейкам: как ложь и манипуляции угрожают научным исследованиям

Опубликованные даже в научных журналах исследования в последние годы перестают быть надежной опорой для врачей, журналистов и адептов доказательной медицины. И на то есть объективные причины. Forbes Life разобрался, почему доверять таким работам с каждым днем все сложнее и к чему могут привести манипуляции ученых

Наталья Иншакова

Фото Getty Images

«Миллиарды долларов выбросили в этот мусоровоз, но зато таким образом была построена не одна академическая карьера, кое-кто очень обогатился», — написал Дэвид Шолто, молодой биолог из Уэльса, в разгромной статье на своем личном сайте For Better Science в январе 2024 года. Он явно не предполагал, к каким последствиям это приведет. Пару лет назад Шолто уволился с работы и полностью отдался своему хобби — охоте на ведьм в научном мире. Он проводил целые дни, кропотливо отыскивая ошибки в исследованиях, а затем писал в журналы с просьбой отозвать недобросовестные публикации. Большинство писем Дэвида просто игнорировали.

Но в случае с блогом For Better Science все вышло иначе. Дэвид замахнулся буквально на святое — уличил в искажении данных группу ведущих исследователей гарвардского Института рака Dana Farber, одного из главных онкоцентров в мире. И это произвело эффект разорвавшейся бомбы. Представители Dana Farber отозвали шесть работ и внесли значительные правки еще в 31. Многие из них были опубликованы 15 и более лет назад и считались программными в изучении рака. По совпадению, в тот же день, когда Шолто опубликовал свое разоблачение, об отставке объявила директор Гарварда Клодин Гэй. В 40 ее статьях был найден грубый плагиат.

Все эти случаи не первые и не единичные. За 2023 год было отозвано 10 000 научных исследований — это самый высокий показатель в истории. Список областей, в которых чаще всего встречаются недобросовестные работы, возглавляют онкология и кардиология. А топ стран, где распространены фейковые исследования: Китай, Пакистан, Индия, Австралия, Россия и США. В 2021 году был завершен восьмилетний масштабный проект по проверке исследований в области рака. Выяснилось, что при попытке воспроизвести их результаты, это удается только в 50% случаев, — и они далеко не всегда оказываются такими впечатляющими, как было заявлено.

«И что мы будем делать? Сидеть и ждать, пока последствия будут фатальными? Или разберемся в причинах?» — задает вопрос Дэвид Шолто в своей статье. Вопрос кажется справедливым: попробуем разобраться в причинах.

Искусственный интеллект

Несколько месяцев назад одна из ведущих мировых научных организаций — Лондонское Королевское общество — провела эксперимент. Аспирантов разных специальностей попросили протестировать новую безымянную нейросеть и попробовать сломать ее «ограду» — так неформально называют защитный механизм, не позволяющий ИИ давать опасные советы и искажать факты. Многим участникам это удалось. Они заставили нейросеть виртуозно доказать, что утки — надежный индикатор чистоты воздуха, а лавандовым маслом можно лечить постковидные симптомы. Но успешнее всего были те, кто предложил ИИ написать несуществующие научные исследования в несуществующие журналы. Результаты были неотличимы от настоящих работ.

То, что наука прибегает к помощи ИИ, не новость. По данным масштабного опроса 2023 года, результаты которого были опубликованы в журнале Nature, 58% ученых считают, что ИИ помогает быстрее производить вычисления и экономит время исследователей. Еще 28% используют нейросети для работы несколько раз в неделю. Действительно, ИИ способен обрабатывать большие массивы данных, писать выводы из многостраничных работ. Но не только.

«Искусственный интеллект может очень быстро сгенерировать базу данных под любой заданный результат. То есть предложить данные, из которых этот несуществующий результат мог быть выведен, — объясняет Анча Баранова, биолог, профессор школы системной биологии в Университете Джорджа Мейсона, США. — Там будут имена, фамилии, возраст, распределение по биомаркерам». Такой эксперимент уже ставили, и нейросеть успешно справилась с задачей. Единственным искажением были не сами данные, а то, что ИИ представил больше гендерно-нейтральных имен, чем обычно встречается в популяции, потому что в нейросети заложен вокизм (от английского woke, wokeism — принцип социальной, расовой и половой справедливости.Forbes Life). Баранова добавляет, что невозможно проверить, были в эксперименте реальные волонтеры или плод воображения ChatGPT: «Все крупные регуляторы защищают личные данные участников исследований. Вы не можете найти их контакты, позвонить и спросить, правда ли, что 27 января вам сделали укол в 7 часов вечера?»

Четыре года назад Gowing life, группа энтузиастов из Оксфорда и Лондонского университетского колледжа, провела похожий эксперимент, используя механизмы машинного обучения. В результате были сгенерированы совершенно неотличимые от настоящих исследования, доказывающие, например, что кофеин способствует росту мышц, а препарат от биполярного расстройства лечит рак простаты. Проблема в том, что ИИ может генерировать не только текст, но и изображения, используемые в научных работах: например, макрофотографии клеток. И отличить их от настоящих практически невозможно.

Впрочем, иногда определить фейк очень просто. В 2022 году Гильйом Кабанач, ученый-информатик из Тулузского университета, обнародовал несколько десятков научных работ, где встречалась фраза regenerate response («повторить запрос») — классическая команда для СhatGPT. Авторы просто забыли удалить ее из своих псевдотрудов.

Бумажные заводы

Paper mills («бумажные заводы») — принятое в научной среде название для сомнительных бизнесов, которые торгуют готовыми работами и авторством, обещая ученым публикации в солидных журналах. В большом исследовании «бумажных заводов» STM (независимая международная организация мониторинга качества научных исследований. — Forbes Life ) приводит письмо авторства одной такой компании. «Крупный поставщик академических работ предлагает готовые статьи на широкий круг тем, от экономики до инженерии. Каждая статья была написана, отредактирована, проверена и переведена командой экспертов, мы также достигли договоренностей о публикации с разными изданиями. Все, что требуется от вас, — это выбрать нужную тему и объем участия. Вы можете приобрести полное авторство или стать одним из контрибьюторов. Мы гарантируем, что статья будет напечатана и проиндексирована». Эта компания базируется в Латвии и за 12 лет существования помогла опубликовать уже 12 560 работ.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Древний Аркаим. Магнит для ученых, эзотериков и туристов Древний Аркаим. Магнит для ученых, эзотериков и туристов

Среди загадочных мест России особое значение имеет древний город Аркаим

Зеркало Мира
Сила света Сила света

Легкий и выразительный интерьер московской квартиры для семьи с двумя детьми

SALON-Interior
ТВС-2ДТС. Композитный кукурузник, который не смог ТВС-2ДТС. Композитный кукурузник, который не смог

О несостоявшейся рабочей лошадке малой авиации в России – ТВС-2ДТС

Наука и техника
Обойдемся без искажений: как избавиться от стереотипного мышления Обойдемся без искажений: как избавиться от стереотипного мышления

Как проявляются когнитивные искажения, какими они бывают?

Forbes
Пыльца покажет Пыльца покажет

Как растения раскрывают преступления и загадки археологии

N+1
Стюардесса рассказала, какие мифы об авиации в кино сильнее всего бесят Стюардесса рассказала, какие мифы об авиации в кино сильнее всего бесят

Мифы о стюардессах: высокие каблуки, запрещенные вещества и отношения с пилотами

Maxim
Альбина Мухаметзянова: «Моя жизнь трансформировалась благодаря «ЯРКО»!» Альбина Мухаметзянова: «Моя жизнь трансформировалась благодаря «ЯРКО»!»

«У нас не было времени долго раскачиваться — мы заходили в сформированный рынок»

Караван историй
Изобрел напиток на века, но не получил ни копейки: как химик Джозеф Пристли случайно создал газированную воду Изобрел напиток на века, но не получил ни копейки: как химик Джозеф Пристли случайно создал газированную воду

Как появилась газировка — напиток, без которого многие не представляют жизнь

ТехИнсайдер
Дубовые веточки вместо щеток и смола вместо паст: чем чистили зубы наши предки Дубовые веточки вместо щеток и смола вместо паст: чем чистили зубы наши предки

Благодаря кому и как человечество смогло получить электрические щетки?

Psychologies
60% считают, что повседневные хлопоты могут помочь поддерживать себя в форме 60% считают, что повседневные хлопоты могут помочь поддерживать себя в форме

Можно ли выполнять норму физических упражнений, не ходя в зал?

ТехИнсайдер
Как улучшить память: 10 проверенных методик Как улучшить память: 10 проверенных методик

Как повысить уровень интеллекта и сохранить молодость мозга?

ТехИнсайдер
10+ предметов, которые сделает ослепительно чистыми перекись водорода: советы клинеров 10+ предметов, которые сделает ослепительно чистыми перекись водорода: советы клинеров

Как использовать перекись водорода для очистки самых разных поверхностей

VOICE
8 случаев внезапных смертей глав государств 8 случаев внезапных смертей глав государств

Президенты, умершие насильственной смертью или в результате несчастных случаев

Maxim
«Мысль о тебе»: как новый ромком с Энн Хэтэуэй критикует эйджизм в отношении женщин «Мысль о тебе»: как новый ромком с Энн Хэтэуэй критикует эйджизм в отношении женщин

Как «Мысль о тебе» обличает эйджизм, но оправдывает токсичные отношения

Forbes
Что такое «голое увольнение»: почему зумеры бурно празднуют уход с работы Что такое «голое увольнение»: почему зумеры бурно празднуют уход с работы

Почему зумеры воспринимают увольнение как событие, которое приносит радость?

Psychologies
И ничего серого! И ничего серого!

Jimmy — продуманная, необычная и интересная яхта

Y Magazine
Топ-7 вещей раздражающих нас в автомобиле Топ-7 вещей раздражающих нас в автомобиле

Что раздражает владельцев машин премиум-класса?

4x4 Club
На наконечниках стрел эпохи неолита нашли остатки человеческого белка На наконечниках стрел эпохи неолита нашли остатки человеческого белка

Ученые исследовали каменные наконечники стрел возрастом около 8-9 тысяч лет

N+1
Ольга Сварник: «Мозгу постоянно нужна новизна» Ольга Сварник: «Мозгу постоянно нужна новизна»

О мире, где человек вынужден конкурировать с нейросетями

РБК
Вадим Верник: «Я получил уникальную возможность пообщаться с Майей Плисецкой» Вадим Верник: «Я получил уникальную возможность пообщаться с Майей Плисецкой»

«Не просто взял интервью у легенды балета, а провел рядом с ней целых пять дней»

Караван историй
«Малым территориям — большое будущее» «Малым территориям — большое будущее»

Технология развития северных территорий через вовлечение местного сообщества

Позитивные изменения
Больше молока от фермы до прилавка Больше молока от фермы до прилавка

Производство сырья и готовой продукции в молочном секторе будет увеличиваться

Агроинвестор
«Трудные подростки»: создатели социального проекта вокруг сериала — о его влиянии на общество «Трудные подростки»: создатели социального проекта вокруг сериала — о его влиянии на общество

Создатели сериала «Трудные подростки» о проблемных тинейджерах и обществе

СНОБ
Так держать! Так держать!

Способы исправления осанки, которые на самом деле только вредят спине

Лиза
Ученые: намного важнее откуда поступает сахар, чем его количество в пище Ученые: намного важнее откуда поступает сахар, чем его количество в пище

Не весь сахар вреден для здоровья! Все зависит от того, откуда он поступает

ТехИнсайдер
9 фраз, которые сделают вас счастливее. Используйте их в разговорах ежедневно! 9 фраз, которые сделают вас счастливее. Используйте их в разговорах ежедневно!

Какие наши слова помогают другим людям понять, что их видят, слышат и любят

Psychologies
Гидроэлектростанции и азартные игры: как Лас-Вегас стал столицей казино Гидроэлектростанции и азартные игры: как Лас-Вегас стал столицей казино

Как связаны плотина Гувера и Лас-Вегас?

ТехИнсайдер
Почему концепции критической интернет-инфраструктуры нет места в будущем Почему концепции критической интернет-инфраструктуры нет места в будущем

Куда сместился ландшафт рисков, чего может стоить перерезанный кабель?

Forbes
Анна Большова: «Сейчас я думаю: «Сколько упущено! Сколько надо было сказать Николаю Петровичу...» Анна Большова: «Сейчас я думаю: «Сколько упущено! Сколько надо было сказать Николаю Петровичу...»

Караченцов был невероятно демократичным, как бы свой парень, душа нараспашку

Коллекция. Караван историй
Роман-катастрофа: 5 лучших книг для знакомства с жанром Роман-катастрофа: 5 лучших книг для знакомства с жанром

Как добавить в будни адреналина, но без лишнего риска: подборка книг

Maxim
Открыть в приложении