Ошибки усугубляются и в заставляют модели еще больше искажать реальность

ForbesHi-Tech

Градация деградации: ожидает ли генеративный искусственный интеллект вырождение

Роман Рожков

Фото Getty Images

Ученые бьют тревогу: если обучать искусственный интеллект на текстах, написанных его же «коллегой», это может привести к краху нейросетей. Обучение на основе данных, полученных другим ИИ, приводит к коллапсу модели, которая неправильно воспринимает реальность. Интернет, таким образом, как мировой океан, уже заполняется «мусором», пишут в статье о своей работе исследователи из Великобритании и Канады. Forbes опросил российских специалистов по ИИ, насколько серьезна эта проблема и к чему она может привести.

Интернет наполняется ерундой

Спустя всего полгода после появления ChatGPT в широком доступе все больше людей применяют ИИ в создании и публикации контента. По данным McKinsey and Company, уже около 50% сотрудников по всему миру используют в своей работе подобные инструменты. Но что происходит по мере распространения контента, сгенерированного ИИ, по всему интернету, когда модели ИИ начинают обучаться на нем, а не на том, что создал человек?

Группа исследователей из Великобритании и Канады изучила эту проблему и недавно опубликовала статью о своей работе в журнале arXiv. То, что они обнаружили, вызывает тревогу для существующей технологии генеративного ИИ и ее будущего: использование контента, сгенерированного моделями, при обучении приводит к необратимым дефектам. Это, в свою очередь, приводит к коллапсу модели — «дегенеративному процессу, при котором со временем модели забывают истинное распределение исходных данных <...> этот процесс неизбежен даже для кейсов с почти идеальными условиями для долгосрочного обучения», пишут они.

«Со временем ошибки усугубляются и в конечном счете заставляют модели, которые учатся на сгенерированных данных, еще больше искажать реальность, — прокомментировал VentureBeat один из ведущих авторов статьи Илья Шумайлов. — Мы были удивлены, наблюдая, как быстро происходит разрушение модели: модели могут быстро забыть большую часть исходных данных, из которых они изначально извлекли уроки». Таким образом, производительность ИИ ухудшается, это приводит к большему количеству ошибок в ответах и создаваемом контенте и к гораздо меньшему разнообразию безошибочных ответов.

«Точно так же, как мы усыпали океаны пластиковым мусором и наполнили атмосферу углекислым газом, мы собираемся заполнить интернет ерундой, — продолжает другой соавтор исследования, профессор Кембриджского и Эдинбургского университетов Росс Андерсон. — Это затруднит обучение новых моделей, что даст преимущество тем, кто уже сделал это. Действительно, мы уже видим, как стартапы с искусственным интеллектом забивают интернет-архив обучающими данными».

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

«Налоговый рай в сердце ЕС»: журналисты рассказали об активах связанных с госкомпаниями россиян в Европе «Налоговый рай в сердце ЕС»: журналисты рассказали об активах связанных с госкомпаниями россиян в Европе

Тысячи россиян владеют компаниями в Люксембурге с активами на триллионы евро

Forbes
Селин Дион, Мадонна, Бейонсе: 15 самых богатых женщин шоу-бизнеса в США Селин Дион, Мадонна, Бейонсе: 15 самых богатых женщин шоу-бизнеса в США

Какие знаменитости вошли в рейтинг самых богатых self-made-женщин Америки?

Forbes
Фильмы с двумя главными злодеями Фильмы с двумя главными злодеями

7 картин, в которых главным героям пришлось бороться против двух антагонистов

Maxim
Рыбный день Рыбный день

Самые интересные места для рыбалки

Robb Report
«Не верьте всему, что крутится в голове»: правда и ложь о навязчивых мыслях «Не верьте всему, что крутится в голове»: правда и ложь о навязчивых мыслях

Тревожные, повторяющиеся мысли мучают многих людей. Как с ними бороться?

Psychologies
Как селфи влияют на нашу самооценку и что с этим делать Как селфи влияют на нашу самооценку и что с этим делать

Какое именно влияние неоднозначная практика селфи оказывает на людей

VOICE
Обед с метеоритом Обед с метеоритом

Как знаменитый Челябинский метеорит оставил след на кулинарной карте региона

Лиза
10 цитат Эрика Берна, которые помогут выстраивать отношения с кем угодно 10 цитат Эрика Берна, которые помогут выстраивать отношения с кем угодно

Цитаты из книг Эрика Берна, чтобы научиться выстраивать отношения с людьми

Psychologies
Вечный капитал на добрые дела: как его создать и зачем это нужно Вечный капитал на добрые дела: как его создать и зачем это нужно

Как обеспечить выбранную организацию или проект поддержкой на долгие годы?

Inc.
Роботы в свитерах научились чувствовать прикосновения Роботы в свитерах научились чувствовать прикосновения

Зачем инженеры связали на автоматическом станке свитеры для роботов?

N+1
Сергей Салкуцан: «Очаги цифровизации возникают в разных областях знаний» Сергей Салкуцан: «Очаги цифровизации возникают в разных областях знаний»

Как меняется наука сегодня и может ли ИИ заменить ученого?

РБК
«Цель — привлечь новых инвесторов и заинтересовать туристов» «Цель — привлечь новых инвесторов и заинтересовать туристов»

Калужская область, безусловно, привлекательна для туриста

РБК
«Муж шагнул в вечность»: вдова Юрия Шатунова обратилась к поклонникам певца в годовщину его смерти «Муж шагнул в вечность»: вдова Юрия Шатунова обратилась к поклонникам певца в годовщину его смерти

Светлана Шатунова рассказала, каким мужем и отцом был Юрий Шатунов

VOICE
Алгоритм сортировки, созданный ИИ, работает в 3 раза быстрее всех придуманных математиками за столетие Алгоритм сортировки, созданный ИИ, работает в 3 раза быстрее всех придуманных математиками за столетие

Искусственный интеллект нашел самые быстрые способы сортировки

ТехИнсайдер
Ольга Профатило и Юлия Вяткина Ольга Профатило и Юлия Вяткина

Основательницы Галереи MYTH собрали самый убедительный пул молодых художников

Собака.ru
4 типа сандалий, которые не стоит носить этим летом, и чем их заменить 4 типа сандалий, которые не стоит носить этим летом, и чем их заменить

Не все сандалии одинаково полезны

VOICE
Интеллектуально развитый мозг думает медленнее, чем среднестатистический Интеллектуально развитый мозг думает медленнее, чем среднестатистический

Умные люди думают быстрее? Оказывается, не всегда

ТехИнсайдер
Домашний фитнес Домашний фитнес

Как встать с дивана и заставить себя заниматься

Лиза
Геймпад для управления и никакой сертификации: что известно об OceanGate, батискаф которой затонул возле «Титаника» Геймпад для управления и никакой сертификации: что известно об OceanGate, батискаф которой затонул возле «Титаника»

OceanGate: как был устроен «Титан» и почему он затонул?

VC.RU
Близ города Калязина Близ города Калязина

Для оформления пространства они выбрали палитру луговых цветов

Идеи Вашего Дома
Казаки летом — модно или странно? Разбираемся раз и навсегда Казаки летом — модно или странно? Разбираемся раз и навсегда

Казаки летом: как же быть с этой фэшн-дилеммой?

VOICE
Любовь Аркус Любовь Аркус

Киновед, основатель журнала «Сеанс» и фонда поддержки людей с аутизмом

Собака.ru
Выражайте благодарность и проявляйте сочувствие: 5 шагов к улучшению отношений — попробуйте на практике Выражайте благодарность и проявляйте сочувствие: 5 шагов к улучшению отношений — попробуйте на практике

Мы часто слышим: отношения — это работа. Но что именно следует делать?

Psychologies
Ты и бывший: что остается после финала? Ты и бывший: что остается после финала?

Любовь однажды заканчивается, но след от нее растягивается на годы

VOICE
Почему монструозный стиль подвинул в сторону «чистых» девушек Почему монструозный стиль подвинул в сторону «чистых» девушек

Почему стиль «хорошей девочки» начал уступать «дерзкой девчонке»?

Psychologies
5 признаков, что вы — жертва эмоционального насилия 5 признаков, что вы — жертва эмоционального насилия

Каким бывает эмоциональное насилие и почему мы предпочитаем о нем молчать?

Psychologies
Летнее настроение: 5 новых книг, которые стоит взять с собой в отпуск Летнее настроение: 5 новых книг, которые стоит взять с собой в отпуск

Книги для отпуска — захватывающие истории в жанрах фантастики и детектива

ТехИнсайдер
Окнами в лес Окнами в лес

Интерьер оформлен так, чтобы поддерживать эффект единения с природой

Идеи Вашего Дома
Мария Хорева Мария Хорева

Мария Хорева после травмы вернулась на сцену по-настоящему триумфально

Собака.ru
От постмодернистской насмешки до университетской программы: какой путь преодолел комикс в России? От постмодернистской насмешки до университетской программы: какой путь преодолел комикс в России?

Расскажем о становлении комикса в России вместе с историком Алексеем Павловским

Правила жизни
Открыть в приложении