Ошибки усугубляются и в заставляют модели еще больше искажать реальность

ForbesHi-Tech

Градация деградации: ожидает ли генеративный искусственный интеллект вырождение

Роман Рожков

Фото Getty Images

Ученые бьют тревогу: если обучать искусственный интеллект на текстах, написанных его же «коллегой», это может привести к краху нейросетей. Обучение на основе данных, полученных другим ИИ, приводит к коллапсу модели, которая неправильно воспринимает реальность. Интернет, таким образом, как мировой океан, уже заполняется «мусором», пишут в статье о своей работе исследователи из Великобритании и Канады. Forbes опросил российских специалистов по ИИ, насколько серьезна эта проблема и к чему она может привести.

Интернет наполняется ерундой

Спустя всего полгода после появления ChatGPT в широком доступе все больше людей применяют ИИ в создании и публикации контента. По данным McKinsey and Company, уже около 50% сотрудников по всему миру используют в своей работе подобные инструменты. Но что происходит по мере распространения контента, сгенерированного ИИ, по всему интернету, когда модели ИИ начинают обучаться на нем, а не на том, что создал человек?

Группа исследователей из Великобритании и Канады изучила эту проблему и недавно опубликовала статью о своей работе в журнале arXiv. То, что они обнаружили, вызывает тревогу для существующей технологии генеративного ИИ и ее будущего: использование контента, сгенерированного моделями, при обучении приводит к необратимым дефектам. Это, в свою очередь, приводит к коллапсу модели — «дегенеративному процессу, при котором со временем модели забывают истинное распределение исходных данных <...> этот процесс неизбежен даже для кейсов с почти идеальными условиями для долгосрочного обучения», пишут они.

«Со временем ошибки усугубляются и в конечном счете заставляют модели, которые учатся на сгенерированных данных, еще больше искажать реальность, — прокомментировал VentureBeat один из ведущих авторов статьи Илья Шумайлов. — Мы были удивлены, наблюдая, как быстро происходит разрушение модели: модели могут быстро забыть большую часть исходных данных, из которых они изначально извлекли уроки». Таким образом, производительность ИИ ухудшается, это приводит к большему количеству ошибок в ответах и создаваемом контенте и к гораздо меньшему разнообразию безошибочных ответов.

«Точно так же, как мы усыпали океаны пластиковым мусором и наполнили атмосферу углекислым газом, мы собираемся заполнить интернет ерундой, — продолжает другой соавтор исследования, профессор Кембриджского и Эдинбургского университетов Росс Андерсон. — Это затруднит обучение новых моделей, что даст преимущество тем, кто уже сделал это. Действительно, мы уже видим, как стартапы с искусственным интеллектом забивают интернет-архив обучающими данными».

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Земля переезжает Земля переезжает

Когда Солнце начнет затухать, корабль «Земля» уже прибудет к новой звезде

Популярная механика
Не тяжкий крест, а зона комфорта: почему в вашей жизни слишком много страданий Не тяжкий крест, а зона комфорта: почему в вашей жизни слишком много страданий

Психолог Лабковский объяснил, что кроется за нашей любовью к стенаниям

Psychologies
6 причин, по которым на ногтях появляются белые пятна: что делать в каждом случае 6 причин, по которым на ногтях появляются белые пятна: что делать в каждом случае

Лейконихия — так «на медицинском» называются эти белые пятна на ногтях

VOICE
ВОЗ советует не использовать заменители сахара для похудения: объясняем, почему ВОЗ советует не использовать заменители сахара для похудения: объясняем, почему

Почему не стоит использовать сахарозаменители?

VOICE
Пять российских водок с выдающимся вкусом Пять российских водок с выдающимся вкусом

Необычная водка хороша собственными вкусовыми оттенками

Maxim
Как правильно мыть голову: 8 простых шагов Как правильно мыть голову: 8 простых шагов

Красивые волосы — это про генетику? Так думают многие и ошибаются

Psychologies
7 новых детективов, которые можно взять в летний отпуск 7 новых детективов, которые можно взять в летний отпуск

Семь романов, которые держат в напряжении до самого финала

СНОБ
Вегетарианка и чудачка: почему друзья Ильи Репина не любили его жену Наталью Нордман Вегетарианка и чудачка: почему друзья Ильи Репина не любили его жену Наталью Нордман

Какой была жена Ильи Репина Наталья Нордман?

Forbes
Так ли хорошо ромашковый чай успокаивает нервы? Так ли хорошо ромашковый чай успокаивает нервы?

Как ромашковый чай действует на организм?

ТехИнсайдер
Почему спортивная одежда должна быть синтетической? Почему спортивная одежда должна быть синтетической?

В чем преимущество синтетической спортивной формы?

Maxim
3 самых распространенных мифа об одиночестве, про которые пора забыть 3 самых распространенных мифа об одиночестве, про которые пора забыть

Что мы думаем об одиночестве?

Psychologies
Домик в деревне: почему фермерские продукты не всегда лучше промышленных Домик в деревне: почему фермерские продукты не всегда лучше промышленных

Отличается ли фермерская продукция от промышленной?

Forbes
Секс втроем и подглядывание: 7 самых популярных женских сексуальных фантазий Секс втроем и подглядывание: 7 самых популярных женских сексуальных фантазий

Образы, с которыми связаны женские эротические фантазии, озвучил психоаналитик

Maxim
Как попасть в игровую вселенную: 5 книг для тех, кто хочет познакомиться с жанром литРПГ Как попасть в игровую вселенную: 5 книг для тех, кто хочет познакомиться с жанром литРПГ

Книги, в которых герои попадают в виртуальные миры

ТехИнсайдер
Юридический язык документов не понравился юристам Юридический язык документов не понравился юристам

Упрощенные договоры юристы оценили выше и запомнили лучше

N+1
Давайте вспомним. Европейские Ford Maverick/Nissan Terrano II (1993-2007) Давайте вспомним. Европейские Ford Maverick/Nissan Terrano II (1993-2007)

МАшины, которые были настолько незаметными, что сегодня о них мало кто помнит

4x4 Club
Мир первый и второй. Продолжение Мир первый и второй. Продолжение

Катерина Мурашова продолжает размышлять на тему классового деления в мире

СНОБ
Реальная любовь Реальная любовь

Пара — это когда два человека соединяются в одно целое

Seasons of life
Дресс-код и шутки о погоде: что нужно знать женщине-экспату, чтобы вести бизнес в ОАЭ Дресс-код и шутки о погоде: что нужно знать женщине-экспату, чтобы вести бизнес в ОАЭ

Сложно ли женщине вести бизнес в ОАЭ?

Forbes
Кто ты без костюма: история непростых взаимоотношений моды и комиксов Кто ты без костюма: история непростых взаимоотношений моды и комиксов

Как американские комиксы и супергерои проникли в моду

Правила жизни
Жаркая погода и озон в воздухе сделали собак агрессивными Жаркая погода и озон в воздухе сделали собак агрессивными

Агрессивность собак зависит от погодных условий

N+1
Бес штрафа. На каких федеральных трассах больше всего камер Бес штрафа. На каких федеральных трассах больше всего камер

На каких трассах легче всего получить штраф с камер и что они фиксируют

РБК
Ученые воссоздают в 3D города, исчезнувшие с лица Земли Ученые воссоздают в 3D города, исчезнувшие с лица Земли

Исследователи воссоздали 3D-модели районов, которых больше не существует

ТехИнсайдер
Новый подход к программам долгосрочной мотивации сотрудников: кейс «Авито» Новый подход к программам долгосрочной мотивации сотрудников: кейс «Авито»

Как компания «Авито» решила вопрос долгосрочной мотивации сотрудников

Forbes
Двойственная натура. Тест-драйв седана Omoda S5 Двойственная натура. Тест-драйв седана Omoda S5

Omoda S5: неоднозначные впечатления от китайского седана

СНОБ
Московский дневник: что писал о российской столице немецкий философ Вальтер Беньямин Московский дневник: что писал о российской столице немецкий философ Вальтер Беньямин

Отрывок из московского дневника философа-марксиста Вальтера Беньямина

Forbes
Как на самом деле расшифровывается SOS Как на самом деле расшифровывается SOS

Как и когда изобрели сигнал SOS?

ТехИнсайдер
Прогулки по Мурому Прогулки по Мурому

Муром – древний город, в котором жили Петр и Феврония

Лиза
Чем занимаются люди в течение дня? В основном, собой Чем занимаются люди в течение дня? В основном, собой

Более трети всего своего времени человек уделяет себе самому

ТехИнсайдер
7 причин, почему нас так бесят самокатчики? 7 причин, почему нас так бесят самокатчики?

Эти хипстеры на самокатах всех достали! И мы можем объяснить, почему

Maxim
Открыть в приложении