Ошибки усугубляются и в заставляют модели еще больше искажать реальность

ForbesHi-Tech

Градация деградации: ожидает ли генеративный искусственный интеллект вырождение

Роман Рожков

Фото Getty Images

Ученые бьют тревогу: если обучать искусственный интеллект на текстах, написанных его же «коллегой», это может привести к краху нейросетей. Обучение на основе данных, полученных другим ИИ, приводит к коллапсу модели, которая неправильно воспринимает реальность. Интернет, таким образом, как мировой океан, уже заполняется «мусором», пишут в статье о своей работе исследователи из Великобритании и Канады. Forbes опросил российских специалистов по ИИ, насколько серьезна эта проблема и к чему она может привести.

Интернет наполняется ерундой

Спустя всего полгода после появления ChatGPT в широком доступе все больше людей применяют ИИ в создании и публикации контента. По данным McKinsey and Company, уже около 50% сотрудников по всему миру используют в своей работе подобные инструменты. Но что происходит по мере распространения контента, сгенерированного ИИ, по всему интернету, когда модели ИИ начинают обучаться на нем, а не на том, что создал человек?

Группа исследователей из Великобритании и Канады изучила эту проблему и недавно опубликовала статью о своей работе в журнале arXiv. То, что они обнаружили, вызывает тревогу для существующей технологии генеративного ИИ и ее будущего: использование контента, сгенерированного моделями, при обучении приводит к необратимым дефектам. Это, в свою очередь, приводит к коллапсу модели — «дегенеративному процессу, при котором со временем модели забывают истинное распределение исходных данных <...> этот процесс неизбежен даже для кейсов с почти идеальными условиями для долгосрочного обучения», пишут они.

«Со временем ошибки усугубляются и в конечном счете заставляют модели, которые учатся на сгенерированных данных, еще больше искажать реальность, — прокомментировал VentureBeat один из ведущих авторов статьи Илья Шумайлов. — Мы были удивлены, наблюдая, как быстро происходит разрушение модели: модели могут быстро забыть большую часть исходных данных, из которых они изначально извлекли уроки». Таким образом, производительность ИИ ухудшается, это приводит к большему количеству ошибок в ответах и создаваемом контенте и к гораздо меньшему разнообразию безошибочных ответов.

«Точно так же, как мы усыпали океаны пластиковым мусором и наполнили атмосферу углекислым газом, мы собираемся заполнить интернет ерундой, — продолжает другой соавтор исследования, профессор Кембриджского и Эдинбургского университетов Росс Андерсон. — Это затруднит обучение новых моделей, что даст преимущество тем, кто уже сделал это. Действительно, мы уже видим, как стартапы с искусственным интеллектом забивают интернет-архив обучающими данными».

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Miss Maxim 2021 Miss Maxim 2021

Победительница 2021 года Валерия Богачева

Maxim
5 мифов о фитнесе после родов, в которые пора перестать верить 5 мифов о фитнесе после родов, в которые пора перестать верить

Как мамам после родов вернуться к прежнему образу жизни?

VOICE
В Стамбуле открывается Музей современного искусства от архитектора ГЭС-2 Ренцо Пьяно В Стамбуле открывается Музей современного искусства от архитектора ГЭС-2 Ренцо Пьяно

Яна Жиляева изучила, как устроен новый Музей современного искусства в Турции

Forbes
История с цветом История с цветом

Интерьер этого дома — профессиональный микс разных стилей

Идеи Вашего Дома
Атмосфера нулевых: 7 лучших фильмов, чтобы переосмыслить то время Атмосфера нулевых: 7 лучших фильмов, чтобы переосмыслить то время

Несколько фильмов и сериалов, которые погрузят вас в нулевые

Maxim
Сложный вопрос. Чем отличается ВИЧ от СПИДа: объясняем простыми словами Сложный вопрос. Чем отличается ВИЧ от СПИДа: объясняем простыми словами

Как передаются и чем отличаются ВИЧ и СПИД

Лиза
Генетики прочитали ДНК погребенных в общей могиле носителей традиции колоколовидных кубков Генетики прочитали ДНК погребенных в общей могиле носителей традиции колоколовидных кубков

Останки женщины и ребенка больше 20 лет назад раскопали в Люксембурге

N+1
Человечество перекачало столько грунтовых вод, что ось Земли наклонилась Человечество перекачало столько грунтовых вод, что ось Земли наклонилась

Ученые из Университета Сеула оценили объем выкаченной из земли воды

ТехИнсайдер
Чувство уюта Чувство уюта

Интерьер этой квартиры получился не только эстетичным, но и очень комфортным

SALON-Interior
Главный фантаст Китая Лю Цысинь: секрет успеха «Задачи трех тел» Главный фантаст Китая Лю Цысинь: секрет успеха «Задачи трех тел»

Рассказываем о книгах Лю Цысиня и его пути к успеху

Maxim
5 книг в жанре интеллектуальной прозы, которые стоит прочесть каждому 5 книг в жанре интеллектуальной прозы, которые стоит прочесть каждому

Качественная интеллектуальная проза, которая заставит ваш мозг работать

Maxim
Три сочных русских мужских сериала, которые вы могли пропустить Три сочных русских мужских сериала, которые вы могли пропустить

Делимся случайно найденным и полюбившимся русскими сериалами

Maxim
Полюбить будни: как находить радость в повседневной жизни и рабочей рутине Полюбить будни: как находить радость в повседневной жизни и рабочей рутине

Отрывок из книги «Обычный вторник» — о том, как наполнить смыслом повседневность

Forbes
4 типа сандалий, которые не стоит носить этим летом, и чем их заменить 4 типа сандалий, которые не стоит носить этим летом, и чем их заменить

Не все сандалии одинаково полезны

VOICE
Я - плохая хозяйка: можно ли это исправить? Я - плохая хозяйка: можно ли это исправить?

Из чего складывается неумение поддерживать порядок вокруг себя?

VOICE
В большой депрессии выделили когнитивный биотип В большой депрессии выделили когнитивный биотип

Ученые предложили выделить биотип большого депрессивного расстройства (БДР)

N+1
Математики нашли девятое дедекиндово число. В нем оказалось 42 знака Математики нашли девятое дедекиндово число. В нем оказалось 42 знака

Математики рассчитали значение девятого числа Дедекинда

N+1
Первая карта метагенома почв Первая карта метагенома почв

Почвы представляют собой одно из крупнейших хранилищ мирового биоразнообразия

Наука и жизнь
Надежда Сысоева: «Бывает, я так устаю, что ложусь на паркет и не могу пошевелиться» Надежда Сысоева: «Бывает, я так устаю, что ложусь на паркет и не могу пошевелиться»

Актриса Надежда Сысоева — о том, что ей больше всего нравится в спорте

Maxim
«Каждый нуждается в тепле и свете». Как автор «Муми-троллей» сделала детскую литературу взрослой «Каждый нуждается в тепле и свете». Как автор «Муми-троллей» сделала детскую литературу взрослой

Туве Янссон на равных говорила с маленькими читателями об одиночестве и смерти

СНОБ
«Антикварная книга от А до Я» «Антикварная книга от А до Я»

Фрагмент из книги «Антикварная книга от А до Я» Петра Дружинина

N+1
Почему опасно делать гель-маникюр дома: эта ошибка может испортить здоровье на всю жизнь Почему опасно делать гель-маникюр дома: эта ошибка может испортить здоровье на всю жизнь

Почему нужно быть осторожной с гель-лаком?

VOICE
Более половины россиян хотели бы зарабатывать так же, как блогеры Более половины россиян хотели бы зарабатывать так же, как блогеры

60% россиян хотели бы иметь такой же доход, как и крупные блогеры

Forbes
Как видят насекомые? Как видят насекомые?

Как устроены глаза насекомых и что они видят

ТехИнсайдер
Тихие американцы Тихие американцы

Что ждет коренных американцев в будущем?

Вокруг света
Экономика будущего. Первый этап | The Economy of the Future. Stage One Экономика будущего. Первый этап | The Economy of the Future. Stage One

Видение Экономики будущего социального инвестора Алексея Рыжкова

Позитивные изменения
О чем вы врете самому себе: найдите ответ на этот вопрос и измените свою жизнь О чем вы врете самому себе: найдите ответ на этот вопрос и измените свою жизнь

Отрывок из книги эксперта по нарративной психологии Кори Игера «Чего я хочу?»

Psychologies
Эксперт: ИИ не отнимет рабочие места у среднего класса, но сильно изменит саму работу Эксперт: ИИ не отнимет рабочие места у среднего класса, но сильно изменит саму работу

Лишь немногие останутся без работы из-за развития ИИ

ТехИнсайдер
Некоронованная правительница Франции: кем была маркиза де Помпадур Некоронованная правительница Франции: кем была маркиза де Помпадур

Какое значение в истории Франции сыграла маркиза де Помпадур?

Forbes
Ветеринар-сексист возместит ущерб секретарше за харассмент: история и комментарий психолога Ветеринар-сексист возместит ущерб секретарше за харассмент: история и комментарий психолога

Что недопустимо на рабочем месте?

Psychologies
Открыть в приложении