Ошибки усугубляются и в заставляют модели еще больше искажать реальность

ForbesHi-Tech

Градация деградации: ожидает ли генеративный искусственный интеллект вырождение

Роман Рожков

Фото Getty Images

Ученые бьют тревогу: если обучать искусственный интеллект на текстах, написанных его же «коллегой», это может привести к краху нейросетей. Обучение на основе данных, полученных другим ИИ, приводит к коллапсу модели, которая неправильно воспринимает реальность. Интернет, таким образом, как мировой океан, уже заполняется «мусором», пишут в статье о своей работе исследователи из Великобритании и Канады. Forbes опросил российских специалистов по ИИ, насколько серьезна эта проблема и к чему она может привести.

Интернет наполняется ерундой

Спустя всего полгода после появления ChatGPT в широком доступе все больше людей применяют ИИ в создании и публикации контента. По данным McKinsey and Company, уже около 50% сотрудников по всему миру используют в своей работе подобные инструменты. Но что происходит по мере распространения контента, сгенерированного ИИ, по всему интернету, когда модели ИИ начинают обучаться на нем, а не на том, что создал человек?

Группа исследователей из Великобритании и Канады изучила эту проблему и недавно опубликовала статью о своей работе в журнале arXiv. То, что они обнаружили, вызывает тревогу для существующей технологии генеративного ИИ и ее будущего: использование контента, сгенерированного моделями, при обучении приводит к необратимым дефектам. Это, в свою очередь, приводит к коллапсу модели — «дегенеративному процессу, при котором со временем модели забывают истинное распределение исходных данных <...> этот процесс неизбежен даже для кейсов с почти идеальными условиями для долгосрочного обучения», пишут они.

«Со временем ошибки усугубляются и в конечном счете заставляют модели, которые учатся на сгенерированных данных, еще больше искажать реальность, — прокомментировал VentureBeat один из ведущих авторов статьи Илья Шумайлов. — Мы были удивлены, наблюдая, как быстро происходит разрушение модели: модели могут быстро забыть большую часть исходных данных, из которых они изначально извлекли уроки». Таким образом, производительность ИИ ухудшается, это приводит к большему количеству ошибок в ответах и создаваемом контенте и к гораздо меньшему разнообразию безошибочных ответов.

«Точно так же, как мы усыпали океаны пластиковым мусором и наполнили атмосферу углекислым газом, мы собираемся заполнить интернет ерундой, — продолжает другой соавтор исследования, профессор Кембриджского и Эдинбургского университетов Росс Андерсон. — Это затруднит обучение новых моделей, что даст преимущество тем, кто уже сделал это. Действительно, мы уже видим, как стартапы с искусственным интеллектом забивают интернет-архив обучающими данными».

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Долгая счастливая жизнь Долгая счастливая жизнь

Старение – это естественно, но не нормально

Популярная механика
«Кто я на самом деле?»: как познать себя и обрести целостность — советы психологов «Кто я на самом деле?»: как познать себя и обрести целостность — советы психологов

Как добраться до своего истинного «Я»?

Psychologies
Почему некоторые люди вечно опаздывают и как можно избавиться от этой пагубной привычки Почему некоторые люди вечно опаздывают и как можно избавиться от этой пагубной привычки

В чем причины систематических опозданий и как можно от них избавиться?

ТехИнсайдер
Владимир Варнава, Алексей Никитин Nocow Владимир Варнава, Алексей Никитин Nocow

Под лайв Алексея Никитина Владимир Варнава поставил танцевальный перформанс

Собака.ru
Думскроллинг: как перестать листать новости и уберечь себя от тревоги Думскроллинг: как перестать листать новости и уберечь себя от тревоги

Как перестать настойчивость читать новости? Как успокоиться?

Psychologies
Как оставить хорошее впечатление о себе после первой встречи? Совет эксперта Как оставить хорошее впечатление о себе после первой встречи? Совет эксперта

Какой тактики придерживаться, чтобы ваш собеседник захотел встретиться еще раз?

ТехИнсайдер
5 фэнтезийных циклов с экзотическими мирами 5 фэнтезийных циклов с экзотическими мирами

Ближний Восток, Азия, доколониальная Америка и Африка в сеттинге фэнтези

Maxim
Зодчие империи Зодчие империи

Сколько зарабатывали главные архитекторы Санкт-Петербурга

Деньги
Tesla так не может. Первый тест-драйв электромобиля Avatr 11 Tesla так не может. Первый тест-драйв электромобиля Avatr 11

Первый тест-драйв и обзор китайского электрического кроссовера Avatr 11

РБК
Да, ты фотогеничная! Как правильно позировать, чтобы всегда выглядеть классно: мастер-класс от модного фотографа Да, ты фотогеничная! Как правильно позировать, чтобы всегда выглядеть классно: мастер-класс от модного фотографа

Как сделать отличные кадры? Рассказывает профи

VOICE
Так ли хорошо ромашковый чай успокаивает нервы? Так ли хорошо ромашковый чай успокаивает нервы?

Как ромашковый чай действует на организм?

ТехИнсайдер
Хозяин своей жизни: 8 аргументов в пользу одиночества Хозяин своей жизни: 8 аргументов в пользу одиночества

Даже в природе не все особи создают пару. И это тоже вариант нормы

Psychologies
8 бытовых проблем, с которыми может справиться обычный пинцет — берите на заметку! 8 бытовых проблем, с которыми может справиться обычный пинцет — берите на заметку!

Это крошечное, но очень полезное приспособление должно быть в каждом доме

ТехИнсайдер
Что такое альгинатная маска и почему ее стоит попробовать Что такое альгинатная маска и почему ее стоит попробовать

Что представляет собой альгинатная маска и как получить от нее максимум пользы

РБК
Взрывающаяся голова и галлюцинации: 5 необычных нарушений сна Взрывающаяся голова и галлюцинации: 5 необычных нарушений сна

Вам случалось когда-нибудь кричать во сне на своего партнера?

Psychologies
Фрукты с низким содержанием углеводов: не вызывают инсулиновых всплесков и действительно помогают худеть Фрукты с низким содержанием углеводов: не вызывают инсулиновых всплесков и действительно помогают худеть

Фрукты, которые никак не скажутся на твоем весе

VOICE
«Устойчивое развитие северных регионов невозможно без участия женщин» «Устойчивое развитие северных регионов невозможно без участия женщин»

Как гендерное равенство влияет на реализацию социальных проектов и инициатив

РБК
От Робби Уильямса до Марины Абрамович: как выглядит современный арт-рынок Эмиратов От Робби Уильямса до Марины Абрамович: как выглядит современный арт-рынок Эмиратов

Насколько велик их рыночный потенциал в Объединенных Арабских Эмиратах сегодня.

Forbes
Директор аукционного дома Егор Молчанов: Нонконформисты существовали за пределами выставочной и музейной жизни Директор аукционного дома Егор Молчанов: Нонконформисты существовали за пределами выставочной и музейной жизни

Почему внимание коллекционеров обращено именно на художников-нонконформистов?

СНОБ
Парк городских аэротакси практически готов к полетам. Но есть проблема Парк городских аэротакси практически готов к полетам. Но есть проблема

Скоро аэротакси поднимутся над городами, но еще есть нерешенные проблемы

ТехИнсайдер
Новый Lexus GX доказывает, что у стильной формы может быть содержание Новый Lexus GX доказывает, что у стильной формы может быть содержание

Более крупный и мощный Lexus GX получил первое серьёзное обновление

4x4 Club
Человек со свойствами и средствами Человек со свойствами и средствами

«Счастливчик Хэнк»: симпатичная кампусная драма

Weekend
Почему картину Климта «Дама с веером» оценивают в 83 миллиона долларов Почему картину Климта «Дама с веером» оценивают в 83 миллиона долларов

Почему картина Густава Климта «Дама с веером» стоит так дорого?

СНОБ
«Она была раздавлена»: Арнольд Шварценеггер рассказал, как жена узнала о его романе с домработницей и о внебрачном сыне «Она была раздавлена»: Арнольд Шварценеггер рассказал, как жена узнала о его романе с домработницей и о внебрачном сыне

Арнольд Шварценеггер заявил, что жалеет о боли, которую причинил жене и детям

VOICE
Ученые озадачены! У белокожих меньше пищевых аллергий, чем у людей с другими цветами кожи Ученые озадачены! У белокожих меньше пищевых аллергий, чем у людей с другими цветами кожи

Уровень дохода и цвет кожи человека влияют на развитие пищевых аллергий

ТехИнсайдер
«Тед Лассо»: чему нас научил заключительный сезон самого жизнеутверждающего телешоу «Тед Лассо»: чему нас научил заключительный сезон самого жизнеутверждающего телешоу

Как «Тед Лассо» научил нас, что настоящая поддержка побеждает боль?

Psychologies
Что такое нейрографика? Что такое нейрографика?

Практика, в которой работают руки и… чувство прекрасного

Psychologies
Такие маленькие, но такие полезные: 7 удивительных преимуществ семян чиа и как правильно их употреблять Такие маленькие, но такие полезные: 7 удивительных преимуществ семян чиа и как правильно их употреблять

Этот крошечный суперпродукт поддерживает здоровье пищеварительной системы

ТехИнсайдер
Профессор из Стэнфорда уверен, что инопланетяне уже на Земле, но люди ничего не замечают! Согласны? Профессор из Стэнфорда уверен, что инопланетяне уже на Земле, но люди ничего не замечают! Согласны?

Неужели инопланетяне были на Земле? Как это проверить?

ТехИнсайдер
Места знать надо Места знать надо

Как города мира конкурируют за лидеров хай-тека, науки и креативных индустрий

РБК
Открыть в приложении