Ошибки усугубляются и в заставляют модели еще больше искажать реальность

ForbesHi-Tech

Градация деградации: ожидает ли генеративный искусственный интеллект вырождение

Роман Рожков

Фото Getty Images

Ученые бьют тревогу: если обучать искусственный интеллект на текстах, написанных его же «коллегой», это может привести к краху нейросетей. Обучение на основе данных, полученных другим ИИ, приводит к коллапсу модели, которая неправильно воспринимает реальность. Интернет, таким образом, как мировой океан, уже заполняется «мусором», пишут в статье о своей работе исследователи из Великобритании и Канады. Forbes опросил российских специалистов по ИИ, насколько серьезна эта проблема и к чему она может привести.

Интернет наполняется ерундой

Спустя всего полгода после появления ChatGPT в широком доступе все больше людей применяют ИИ в создании и публикации контента. По данным McKinsey and Company, уже около 50% сотрудников по всему миру используют в своей работе подобные инструменты. Но что происходит по мере распространения контента, сгенерированного ИИ, по всему интернету, когда модели ИИ начинают обучаться на нем, а не на том, что создал человек?

Группа исследователей из Великобритании и Канады изучила эту проблему и недавно опубликовала статью о своей работе в журнале arXiv. То, что они обнаружили, вызывает тревогу для существующей технологии генеративного ИИ и ее будущего: использование контента, сгенерированного моделями, при обучении приводит к необратимым дефектам. Это, в свою очередь, приводит к коллапсу модели — «дегенеративному процессу, при котором со временем модели забывают истинное распределение исходных данных <...> этот процесс неизбежен даже для кейсов с почти идеальными условиями для долгосрочного обучения», пишут они.

«Со временем ошибки усугубляются и в конечном счете заставляют модели, которые учатся на сгенерированных данных, еще больше искажать реальность, — прокомментировал VentureBeat один из ведущих авторов статьи Илья Шумайлов. — Мы были удивлены, наблюдая, как быстро происходит разрушение модели: модели могут быстро забыть большую часть исходных данных, из которых они изначально извлекли уроки». Таким образом, производительность ИИ ухудшается, это приводит к большему количеству ошибок в ответах и создаваемом контенте и к гораздо меньшему разнообразию безошибочных ответов.

«Точно так же, как мы усыпали океаны пластиковым мусором и наполнили атмосферу углекислым газом, мы собираемся заполнить интернет ерундой, — продолжает другой соавтор исследования, профессор Кембриджского и Эдинбургского университетов Росс Андерсон. — Это затруднит обучение новых моделей, что даст преимущество тем, кто уже сделал это. Действительно, мы уже видим, как стартапы с искусственным интеллектом забивают интернет-архив обучающими данными».

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Выстрел через континент Выстрел через континент

Испытательный полигон «Кура»: записки очевидца

Популярная механика
Что пишут о фильме «Человек-паук: Паутина вселенных»? Что пишут о фильме «Человек-паук: Паутина вселенных»?

Получилось ли у фильма «Человек-паук: Паутина вселенных» задрать планку?

Правила жизни
Вырубка лесов на японском острове испортила зубы местным макакам Вырубка лесов на японском острове испортила зубы местным макакам

Сильный стресс вызвал у макак недоразвитие эмали

N+1
Пропускать душ и грызть ногти: 6 детских привычек, которые вообще-то полезны Пропускать душ и грызть ногти: 6 детских привычек, которые вообще-то полезны

Неэстетичные привычки, которые идут детям лишь на пользу

Psychologies
Юлиана Слащева: Мультипликация — лучший способ познакомить детей с их родителями Юлиана Слащева: Мультипликация — лучший способ познакомить детей с их родителями

Интервью председателя совета директоров Союзмультфильма Юлианы Слащевой

СНОБ
Как узнать материнскую плату: 7 простых способов Как узнать материнскую плату: 7 простых способов

Как узнать модель материнской платы в Windows 10 или 11?

CHIP
Ремарк в Голливуде: как снимали кино по романам великого пацифиста Ремарк в Голливуде: как снимали кино по романам великого пацифиста

Кинокритик вспоминает историю экранизаций Ремарка

Правила жизни
Вопрос дня: вы контролируете жизнь своих детей в интернете? Вопрос дня: вы контролируете жизнь своих детей в интернете?

Где допустимая грань в контроле за детьми и их жизнью в интернете?

СНОБ
Как выглядит в обычной жизни самая красивая принцесса Иордании - и какой она была еще несколько лет назад Как выглядит в обычной жизни самая красивая принцесса Иордании - и какой она была еще несколько лет назад

Хаала бинт аль Хашим проснулась знаменитой после свадьбы своего кузена

VOICE
Бессмысленно и бестактно: почему не стоит советовать женщинам выходить замуж Бессмысленно и бестактно: почему не стоит советовать женщинам выходить замуж

Могут ли женщины состояться в жизни, не выходя замуж?

Forbes
Эти работники могут выдохнуть: 8 профессий, которые не сможет заменить ИИ (пока) Эти работники могут выдохнуть: 8 профессий, которые не сможет заменить ИИ (пока)

Какие профессии невозможно автоматизировать?

ТехИнсайдер
Ученья идут: какие технологии и почему закрепились в сфере образования Ученья идут: какие технологии и почему закрепились в сфере образования

Как нейросети изменяют сферу образования?

Forbes
«Цель — привлечь новых инвесторов и заинтересовать туристов» «Цель — привлечь новых инвесторов и заинтересовать туристов»

Калужская область, безусловно, привлекательна для туриста

РБК
Как вернуть любовь мужа: 8 главных советов Как вернуть любовь мужа: 8 главных советов

Разрешить семейный кризис можно — главное, предпринять правильные шаги

Psychologies
Как в Россию возвращалась теология и зачем она нам сегодня Как в Россию возвращалась теология и зачем она нам сегодня

Выявлять и акцентировать проблемы гуманитарной науки в целом — задача теологии

Наука
То исчезает, то появляется… То исчезает, то появляется…

Возможно, ты тоже сталкивалась с мужчинами, которые пропадали из твоей жизни

Лиза
Нейл-табу: какие формы ногтей ненавидят мастера маникюра Нейл-табу: какие формы ногтей ненавидят мастера маникюра

Специалисты салонов рассказали, какие формы ногтей они не любят и почему

VOICE
5 интересных художников из национальных тюркоязычных республик 5 интересных художников из национальных тюркоязычных республик

Современные художники из национальных тюркоязычных республик

СНОБ
Как ничто стало нечто и почему это так важно? Как ничто стало нечто и почему это так важно?

Когда появился ноль и как он стал из ничем чем-то

Наука и жизнь
Родителям на заметку! Речь взрослых влияет на когнитивное развитие ребенка Родителям на заметку! Речь взрослых влияет на когнитивное развитие ребенка

Родители, которые разговаривают со своими младенцами, улучшают развитие их мозга

ТехИнсайдер
История мятежей в СССР История мятежей в СССР

Бунтов в истории СССР было гораздо больше, чем принято думать

Maxim
Зодчие империи Зодчие империи

Сколько зарабатывали главные архитекторы Санкт-Петербурга

Деньги
Как 64-летняя американка заработала $350 млн на мармеладках с каннабисом Как 64-летняя американка заработала $350 млн на мармеладках с каннабисом

Как Нэнси Уайтман начала свое дело, почерпнув идею из разговоров на вечеринке

Forbes
Крикет круче хоккея, а ММА теснит бокс: 10 самых популярных видов спорта Крикет круче хоккея, а ММА теснит бокс: 10 самых популярных видов спорта

Самые популярные виды спорта: от ММА и гольфа до крикета и футбола

Forbes
«Это наживается нервами десятилетий, а конфискуется в одну ночь» «Это наживается нервами десятилетий, а конфискуется в одну ночь»

Александр Солженицын о правилах выживания

Weekend
Как правильно мыть голову: 8 простых шагов Как правильно мыть голову: 8 простых шагов

Красивые волосы — это про генетику? Так думают многие и ошибаются

Psychologies
Зачем нам гендерное равенство: семь ответов на самые популярные вопросы Зачем нам гендерное равенство: семь ответов на самые популярные вопросы

Зачем России гендерное равенство и почему оно выгодно государству в целом

Forbes
«Сумеречный сон»: как появился и почему исчез метод безболезненных родов, популярный в начале XX века «Сумеречный сон»: как появился и почему исчез метод безболезненных родов, популярный в начале XX века

В начале XX века газеты начали писать, что родить без боли возможно…

VOICE
Ксения Подвальная Ксения Подвальная

Главный феномен петербургской моды прямо сейчас — Atelier Biser

Собака.ru
Астрономы открывают новую эру в исследовании экзопланет: эру прямых наблюдений Астрономы открывают новую эру в исследовании экзопланет: эру прямых наблюдений

Астрономы получили прямые снимки одной из самых маленьких планет

ТехИнсайдер
Открыть в приложении