Ошибки усугубляются и в заставляют модели еще больше искажать реальность

ForbesHi-Tech

Градация деградации: ожидает ли генеративный искусственный интеллект вырождение

Роман Рожков

Фото Getty Images

Ученые бьют тревогу: если обучать искусственный интеллект на текстах, написанных его же «коллегой», это может привести к краху нейросетей. Обучение на основе данных, полученных другим ИИ, приводит к коллапсу модели, которая неправильно воспринимает реальность. Интернет, таким образом, как мировой океан, уже заполняется «мусором», пишут в статье о своей работе исследователи из Великобритании и Канады. Forbes опросил российских специалистов по ИИ, насколько серьезна эта проблема и к чему она может привести.

Интернет наполняется ерундой

Спустя всего полгода после появления ChatGPT в широком доступе все больше людей применяют ИИ в создании и публикации контента. По данным McKinsey and Company, уже около 50% сотрудников по всему миру используют в своей работе подобные инструменты. Но что происходит по мере распространения контента, сгенерированного ИИ, по всему интернету, когда модели ИИ начинают обучаться на нем, а не на том, что создал человек?

Группа исследователей из Великобритании и Канады изучила эту проблему и недавно опубликовала статью о своей работе в журнале arXiv. То, что они обнаружили, вызывает тревогу для существующей технологии генеративного ИИ и ее будущего: использование контента, сгенерированного моделями, при обучении приводит к необратимым дефектам. Это, в свою очередь, приводит к коллапсу модели — «дегенеративному процессу, при котором со временем модели забывают истинное распределение исходных данных <...> этот процесс неизбежен даже для кейсов с почти идеальными условиями для долгосрочного обучения», пишут они.

«Со временем ошибки усугубляются и в конечном счете заставляют модели, которые учатся на сгенерированных данных, еще больше искажать реальность, — прокомментировал VentureBeat один из ведущих авторов статьи Илья Шумайлов. — Мы были удивлены, наблюдая, как быстро происходит разрушение модели: модели могут быстро забыть большую часть исходных данных, из которых они изначально извлекли уроки». Таким образом, производительность ИИ ухудшается, это приводит к большему количеству ошибок в ответах и создаваемом контенте и к гораздо меньшему разнообразию безошибочных ответов.

«Точно так же, как мы усыпали океаны пластиковым мусором и наполнили атмосферу углекислым газом, мы собираемся заполнить интернет ерундой, — продолжает другой соавтор исследования, профессор Кембриджского и Эдинбургского университетов Росс Андерсон. — Это затруднит обучение новых моделей, что даст преимущество тем, кто уже сделал это. Действительно, мы уже видим, как стартапы с искусственным интеллектом забивают интернет-архив обучающими данными».

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

«Лебедь» возвращается «Лебедь» возвращается

Ту-160 сегодня готовится ко второй жизни

Популярная механика
5 лучших моделей купальников для женщин 50+: мнение стилистов 5 лучших моделей купальников для женщин 50+: мнение стилистов

Какие купальники будут комфортны и функциональны для женщин 50+?

VOICE
Обсасывать и выбрасывать: на рынках Китая появилось странное блюдо из жареных камней Обсасывать и выбрасывать: на рынках Китая появилось странное блюдо из жареных камней

Кулинарное увлечение китайцев с жареной галькой потрясло интернет

ТехИнсайдер
Ученые воссоздают в 3D города, исчезнувшие с лица Земли Ученые воссоздают в 3D города, исчезнувшие с лица Земли

Исследователи воссоздали 3D-модели районов, которых больше не существует

ТехИнсайдер
Были ли в России придворные шуты? Были ли в России придворные шуты?

На Руси шутов звали «дураками». Многие из них происходили из бояр или дворян

Культура.РФ
Как узнать сколько осталось трафика и сколько израсходовано Как узнать сколько осталось трафика и сколько израсходовано

Если гигабайты куда-то утекают, вот инструкция, как всё держать под контролем

CHIP
Детское выгорание: как не вырастить несчастного профессионала из лучших побуждений Детское выгорание: как не вырастить несчастного профессионала из лучших побуждений

Как вырастить из ребенка счастливого профессионала и не допустить выгорания

Forbes
Эпоха зрелища: как меняется пейзаж Дубая и он становится «правильным городом» Эпоха зрелища: как меняется пейзаж Дубая и он становится «правильным городом»

Отрывок из книги «Эпоха зрелища. Приключения архитектуры и город XXI века»

Forbes
5 японских техник, которые увеличат продуктивность и улучшат качество жизни 5 японских техник, которые увеличат продуктивность и улучшат качество жизни

Кайдзен, ваби-саби, икигай... Что это такое и почему они будут полезны каждому?

Maxim
За регенерацию тела у гидрактиний отвечают процессы старения клеток За регенерацию тела у гидрактиний отвечают процессы старения клеток

Как крошечное морское существо гидрактиния регенерирует новое тело?

ТехИнсайдер
Без Marvel и DC: 12 лучших экранизаций комиксов Без Marvel и DC: 12 лучших экранизаций комиксов

Устали от Marvel и DC, но любите фильмы по комиксам?

Правила жизни
Как стать донором и что можно пожертвовать нуждающимся Как стать донором и что можно пожертвовать нуждающимся

Гид по разным опциям донорства, доступным в России

СНОБ
Человек — швейцарский нож: как пиарщики помогают в достижении бизнес-целей Человек — швейцарский нож: как пиарщики помогают в достижении бизнес-целей

Как сделать так, чтобы о тебе узнали, тем более в правильном и нужном ключе?

Inc.
«Я не хотел жениться на девушке с ребенком»: онкобольной Дмитрий Спиридонов признался, почему опасался Лену Катину «Я не хотел жениться на девушке с ребенком»: онкобольной Дмитрий Спиридонов признался, почему опасался Лену Катину

Дмитрий Спиридонов признался, что не видел совместного будущего с Леной Катиной

VOICE
Принцесса, которую любят за золотое сердце: как племянница иорданского короля Айя доказывает, что внешность - не главное Принцесса, которую любят за золотое сердце: как племянница иорданского короля Айя доказывает, что внешность - не главное

Айя бинт аль Фейсал — трудолюбивая и вдумчивая принцесса хашимитского двора

VOICE
Кератин для волос: 4 причины сделать процедуру или отказаться от нее Кератин для волос: 4 причины сделать процедуру или отказаться от нее

Разбираемся с экспертами в плюсах и минусах кератинового выпрямления

РБК
Попасть в историю Попасть в историю

5 способов улучшить свой кредитный рейтинг

Лиза
«Среди взрослых куча злых — зачем детям их уважать?»: монолог режиссера Бориса Хлебникова «Среди взрослых куча злых — зачем детям их уважать?»: монолог режиссера Бориса Хлебникова

Режиссер Борис Хлебников — о том, как не давить на детей

Psychologies
Как детские травмы влияют на карьеру и успешность Как детские травмы влияют на карьеру и успешность

О взаимосвязи карьеры и психотравм раннего возраста рассказывает супервизор

Psychologies
Дети и взрослые с СДВГ: отвечаем на самые важные вопросы Дети и взрослые с СДВГ: отвечаем на самые важные вопросы

Как отличить особенности поведения или темперамента ребенка от диагноза?

Psychologies
Витамины для мамы Витамины для мамы

10 важных витаминов при планировании беременности

Лиза
Новый подход к программам долгосрочной мотивации сотрудников: кейс «Авито» Новый подход к программам долгосрочной мотивации сотрудников: кейс «Авито»

Как компания «Авито» решила вопрос долгосрочной мотивации сотрудников

Forbes
Мигрень повысила риск преждевременного инфаркта у женщин Мигрень повысила риск преждевременного инфаркта у женщин

У женщин с мигренью риск инфаркта миокарда и инсульта выше, чем у мужчин

N+1
Нужно ли запрещать людям душиться перед походом ресторан? Вот где начали экспериментировать Нужно ли запрещать людям душиться перед походом ресторан? Вот где начали экспериментировать

Действительно ли запахи могут испортить удовольствие от еды?

ТехИнсайдер
Высокий сезон Высокий сезон

Начало лета – самое время есть спаржу. Свежую, сочную, наполненную витаминами

Лиза
Сколько нужно времени, чтобы он в тебя влюбился: вот что говорят мужчины Сколько нужно времени, чтобы он в тебя влюбился: вот что говорят мужчины

Существует ли любовь с первого взгляда и сколько минут нужно, чтобы влюбиться?

VOICE
Без вины виноватый: защищаемся от субсидиарной ответственности Без вины виноватый: защищаемся от субсидиарной ответственности

Что такое субсидиарная ответственность и как от нее защититься

Inc.
В большой депрессии выделили когнитивный биотип В большой депрессии выделили когнитивный биотип

Ученые предложили выделить биотип большого депрессивного расстройства (БДР)

N+1
Совестливые люди на высоких постах с меньшей вероятностью берут взятки. Верите? Совестливые люди на высоких постах с меньшей вероятностью берут взятки. Верите?

Чувство вины может иметь преимущества для общества в целом

ТехИнсайдер
Австралийские палеонтологи описали самого крупного сцинка Австралийские палеонтологи описали самого крупного сцинка

Ящерица из плейстоценовой Австралии дорастала до 60 сантиметров в длину

N+1
Открыть в приложении