Ошибки усугубляются и в заставляют модели еще больше искажать реальность

ForbesHi-Tech

Градация деградации: ожидает ли генеративный искусственный интеллект вырождение

Роман Рожков

Фото Getty Images

Ученые бьют тревогу: если обучать искусственный интеллект на текстах, написанных его же «коллегой», это может привести к краху нейросетей. Обучение на основе данных, полученных другим ИИ, приводит к коллапсу модели, которая неправильно воспринимает реальность. Интернет, таким образом, как мировой океан, уже заполняется «мусором», пишут в статье о своей работе исследователи из Великобритании и Канады. Forbes опросил российских специалистов по ИИ, насколько серьезна эта проблема и к чему она может привести.

Интернет наполняется ерундой

Спустя всего полгода после появления ChatGPT в широком доступе все больше людей применяют ИИ в создании и публикации контента. По данным McKinsey and Company, уже около 50% сотрудников по всему миру используют в своей работе подобные инструменты. Но что происходит по мере распространения контента, сгенерированного ИИ, по всему интернету, когда модели ИИ начинают обучаться на нем, а не на том, что создал человек?

Группа исследователей из Великобритании и Канады изучила эту проблему и недавно опубликовала статью о своей работе в журнале arXiv. То, что они обнаружили, вызывает тревогу для существующей технологии генеративного ИИ и ее будущего: использование контента, сгенерированного моделями, при обучении приводит к необратимым дефектам. Это, в свою очередь, приводит к коллапсу модели — «дегенеративному процессу, при котором со временем модели забывают истинное распределение исходных данных <...> этот процесс неизбежен даже для кейсов с почти идеальными условиями для долгосрочного обучения», пишут они.

«Со временем ошибки усугубляются и в конечном счете заставляют модели, которые учатся на сгенерированных данных, еще больше искажать реальность, — прокомментировал VentureBeat один из ведущих авторов статьи Илья Шумайлов. — Мы были удивлены, наблюдая, как быстро происходит разрушение модели: модели могут быстро забыть большую часть исходных данных, из которых они изначально извлекли уроки». Таким образом, производительность ИИ ухудшается, это приводит к большему количеству ошибок в ответах и создаваемом контенте и к гораздо меньшему разнообразию безошибочных ответов.

«Точно так же, как мы усыпали океаны пластиковым мусором и наполнили атмосферу углекислым газом, мы собираемся заполнить интернет ерундой, — продолжает другой соавтор исследования, профессор Кембриджского и Эдинбургского университетов Росс Андерсон. — Это затруднит обучение новых моделей, что даст преимущество тем, кто уже сделал это. Действительно, мы уже видим, как стартапы с искусственным интеллектом забивают интернет-архив обучающими данными».

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Побеждённая зараза Побеждённая зараза

Натуральная оспа — первая и единственная болезнь, которую удалось ликвидировать

Дилетант
Судить по одежке: как имидж и внешность преступника могут повлиять на приговор Судить по одежке: как имидж и внешность преступника могут повлиять на приговор

Действительно ли внешний вид подсудимых имеет значение

Forbes
Легенды АПЛ и обладатели «Золотого мяча»: кто до Месси поднимал футбол в США Легенды АПЛ и обладатели «Золотого мяча»: кто до Месси поднимал футбол в США

Звезды в истории Major Soccer League, помогавшие популяризировать футбол в США

Forbes
Как игровая школа росла быстрее рынка и выручила 315 млн рублей в 2022 году Как игровая школа росла быстрее рынка и выручила 315 млн рублей в 2022 году

Как школа игровой разработки XYZ превратилась в полноценный бизнес

Forbes
Семь самых загадочных археологических находок Семь самых загадочных археологических находок

Иногда древние артефакты заставляют ученых гадать о их назначении десятилетиями

Maxim
«Вы либо станете миллиардером, либо вас арестуют»: пять современных сериалов о бизнесе на основе реальных историй «Вы либо станете миллиардером, либо вас арестуют»: пять современных сериалов о бизнесе на основе реальных историй

Самые актуальные и интересные сериалы о бизнесе

Inc.
Как тип привязанности повлияет на ваши отношения: 3 сценария Как тип привязанности повлияет на ваши отношения: 3 сценария

Как сценарий отношений зависит от детского опыта партнеров?

Psychologies
Любознательный непоседа или сдержанный интеллектуал: какой твой ребенок по психоматрице Любознательный непоседа или сдержанный интеллектуал: какой твой ребенок по психоматрице

Какими чертами характера детей наделяет январь, а какими — июль?

VOICE
«Мы ожидаем запуска нового цикла инвестиционного кредитования» «Мы ожидаем запуска нового цикла инвестиционного кредитования»

Пессимистические прогнозы о перспективах российской экономики не сбылись

Деньги
Достойный поклонения Достойный поклонения

Летнее путешествие в легендарный город позволит вам не только отдохнуть

Отдых в России
Что такое «дофаминовая перезагрузка» и почему она так нужна нам сегодня Что такое «дофаминовая перезагрузка» и почему она так нужна нам сегодня

Что такое дофаминовая система, как она связана с получением удовольствия

Psychologies
Маршрут перестроен. Гид по винодельням Краснодарского края Маршрут перестроен. Гид по винодельням Краснодарского края

Маршрут из шести виноделен Краснодарского края — от Геленджика до Голубицкой

СНОБ
10 оттенков страшного 10 оттенков страшного

Чем пугает современный хоррор

Weekend
Миссия допустима: 5 случаев, когда можно шпионить за партнером Миссия допустима: 5 случаев, когда можно шпионить за партнером

По мнению экспертов, есть ситуации, в которых можно следить за партнером

VOICE
Миграцию летучих мышей удалось описать благодаря радарам и машинному обучению Миграцию летучих мышей удалось описать благодаря радарам и машинному обучению

Алгоритм помог отделить летучих мышей от птиц и насекомых

N+1
Аккумуляторная независимость: как в России развивается производство литий-ионных накопителей энергии Аккумуляторная независимость: как в России развивается производство литий-ионных накопителей энергии

О том, какова сейчас ситуация с литием и аккумуляторами в России

ТехИнсайдер
Новый Lexus GX доказывает, что у стильной формы может быть содержание Новый Lexus GX доказывает, что у стильной формы может быть содержание

Более крупный и мощный Lexus GX получил первое серьёзное обновление

4x4 Club
Владимир Хавинсон Владимир Хавинсон

Академик РАН занимается изучением нормализации активности генов больше 40 лет

Собака.ru
Зеркало эмоций: что тело говорит о чувствах — выполните полезное упражнение Зеркало эмоций: что тело говорит о чувствах — выполните полезное упражнение

Как научиться жить в гармонии со своим телом и чувствами?

Psychologies
«Ношу эту рубашку 20 лет». Пять историй о долгожителях гардероба «Ношу эту рубашку 20 лет». Пять историй о долгожителях гардероба

Девушки рассказали об одежде, обуви и сумках, которые они купили 10-20 лет

РБК
Встречи только для секса: что нужно знать — 4 правила безопасности Встречи только для секса: что нужно знать — 4 правила безопасности

Зачем люди ищут партнеров только для интимных встреч?

Psychologies
Как превратить дело жизни в успешный бизнес: интервью с владельцем отеля «Гельвеция» Юнисом Теймурханлы Как превратить дело жизни в успешный бизнес: интервью с владельцем отеля «Гельвеция» Юнисом Теймурханлы

Юнис Теймурханлы — как за годы изменился Санкт-Петербург и отель “Гельвеция”

Правила жизни
Особенности национальной газификации Особенности национальной газификации

Газовики Подмосковья полностью перешли на российскую продукцию

Деньги
Растения «чувствуют», когда к ним прикасаются! Вот как это возможно Растения «чувствуют», когда к ним прикасаются! Вот как это возможно

Растительные клетки посылают разные сигналы, реагируя на прикосновения

ТехИнсайдер
Физики разобрались с танцем арахиса в пиве Физики разобрались с танцем арахиса в пиве

Эксперимент, который поможет добывать руду и обрабатывать ядерные отходы

N+1
Как избавиться от храпа женщине и мужчине и почему человек храпит Как избавиться от храпа женщине и мужчине и почему человек храпит

Почему человек храпит?

РБК
Не тяжкий крест, а зона комфорта: почему в вашей жизни слишком много страданий Не тяжкий крест, а зона комфорта: почему в вашей жизни слишком много страданий

Психолог Лабковский объяснил, что кроется за нашей любовью к стенаниям

Psychologies
Более половины россиян хотели бы зарабатывать так же, как блогеры Более половины россиян хотели бы зарабатывать так же, как блогеры

60% россиян хотели бы иметь такой же доход, как и крупные блогеры

Forbes
Милютины Милютины

В отличие от большей части тогдашней элиты, Милютины поднялись из низов

Дилетант
Самые популярные мужские вопросы про косметические процедуры Самые популярные мужские вопросы про косметические процедуры

Основные  вопросы на косметологические услуги от мужчин звучат примерно так

Maxim
Открыть в приложении