Чем хороша новая версия популярного бота от OpenAI GPT-4

ForbesHi-Tech

Четвертое измерение: что умеет новая языковая модель от OpenAI GPT-4

Манвел Аветисян

Фото Silas Stein / picture alliance via Getty Images

С момента появления ChatGPT в интернете уже разошлись мемы с вакансией «выключателя», который должен вытащить вилку из розетки, если ИИ внутри модели оживет. Директор по развитию прикладных проектов Института искусственного интеллекта AIRI Манвел Аветисян рассказывает о том, что сейчас умеет новая версия основы популярного бота GPT-4 и как релиз новинки от OpenAI отразится на нашей жизни.

Эволюция языковых моделей

Бурное развитие умных языковых ботов началось с довольно простой мысли: в виде текста можно представить огромное количество задач, а значит, можно научить модели ИИ эти задачи решать. В 2017 году появились трансформерные архитектуры, способные обучаться на больших объемах текстов. Чуть позже ученые совместили обучение с подкреплением (Reinforcement learning, RL, технология, которая позволяет «хвалить» программу за правильные действия и «наказывать» за неправильные) с большими языковыми моделями, такими, как GPT-3 (Large Language Models, LLM). Получился ChatGPT.

Представьте себе игру в шахматы: подкрепление в ней — это результат игры. Компьютерному агенту на основе искусственного интеллекта необходимо научиться делать ходы, которые приведут к победе. Люди способны действовать с подкреплением, удаленным на годы вперед, например, долго и усердно трудиться в школе и университете, чтобы получить первую зарплату. Компьютеру сложно выполнять длинные последовательности действий для достижения итогового результата, и разработчикам приходится учить ИИ «заглядывать вперед» при выборе следующего шага. Исследователи начали обучать модели, способные отвечать на вопросы человека и интегрировать в них огромные объемы человеческой обратной связи.

Среди основных прорывов, полученных исследователями в последнее время, можно отметить:

  • Toolformer, LLM от Meta (признана в России экстремистской организацией и запрещена): исследователи научили большие языковые модели обращаться к внешним инструментам (веб-поиску, переводчику, калькулятору).
  • LLaMA, LLM от Meta (признана экстремистской организацией на территории РФ): ученые доказали, что объем данных для обучения модели важнее, чем ее сложность. Более легкие по вычислительным ресурсам модели с большими выборками обучающих данных обошли большие модели в качестве решения прикладных задач.
  • ChatGPT на Bing научился указывать источники тех или иных фактов, которые он приводит в ответе на вопрос.

Плюсы и минусы нового движка

GPT-4 — последняя из больших языковых моделей семейства GPT от OpenAI: GPT-2, GPT-3 и GPT-3.5, которая легла в основу первой версии популярного бота ChatGPT. Модель состоит из большого количества нейросетей, которые умеют обрабатывать, понимать, анализировать, интерпретировать и генерировать тексты на естественном языке. Несмотря на то что четвертая версия модели понимает 28 языков, включая малоресурсные валлийский язык и урду (близкий к хинди язык индоевропейской семьи), наилучшие результаты по-прежнему можно получить, используя для создания промптов (так называются фразы-запросы к модели) английский.

GPT-4 прошел проверку эффективности на множестве экзаменов — как академических, так и профессиональных. Порой работы модели превосходили результаты большинства параллельно тестируемых людей. Например, на смоделированном экзамене для адвокатов (Uniform Bar Examination) GPT-4 оказалась среди 10% лучших участников теста, в то время как ChatGPT оказался среди худших 10%. Кроме того, согласно данным технического отчета OpenAI, сгенерированные GPT-4 ответы нравились тестовой группе пользователей в 70,2% случаев чаще, чем ответы GPT-3.5. Впрочем, по словам самих создателей, разница между ответами от двух версий бота может показаться незаметной в процессе работы с интерфейсом.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Горчичники, банки и «звездочка»: чем лечились от простуды в СССР Горчичники, банки и «звездочка»: чем лечились от простуды в СССР

Домашние методы лечения из СССР: были ли они действительно эффективными

ТехИнсайдер
Почему финансовые маневры Binance до боли напоминают последние махинации FTX Почему финансовые маневры Binance до боли напоминают последние махинации FTX

Придумывать правила на рынке крупнейшей в мире криптобирже легче на ходу

Forbes
Россия, Кудыкина гора Россия, Кудыкина гора

Огнедышащий Змей Горыныч обнаружен под Липецком

Maxim
«Я понял, каково потерять все деньги» «Я понял, каково потерять все деньги»

Андрей Дороничев — о том, как его стартап пережил крах Silicon Valley Bank

Inc.
Ошибки мышления, которые портят жизнь Ошибки мышления, которые портят жизнь

Как бороться с внутренними установками, которые мешают быть успешным

Maxim
Лидия Метельская Лидия Метельская

Лидия Метельская строит параллельный мир Meowshka из белоснежных котиков

Собака.ru
Из чего сделаны наши девчонки: 11 фильмов о сильных женщинах Из чего сделаны наши девчонки: 11 фильмов о сильных женщинах

Фильмы о сильных женщинах: от смелости и выносливости до оголтелой мстительности

Правила жизни
Роман о Мишеле Строгоффе Роман о Мишеле Строгоффе

Как Жюль Верн написал признание в любви к России, а Россия его не поняла

Дилетант
Стресс-код: 5 способов быстро расслабиться Стресс-код: 5 способов быстро расслабиться

Техники, которые помогут моментально успокоиться

VOICE
Страшно интересно: пять мест с мистической атмосферой в России Страшно интересно: пять мест с мистической атмосферой в России

Предлагаем пять мест, пользующихся дурной славой, где можно пощекотать нервы

Караван историй
Почему у мужчин есть проблемы с эрекцией во время секса? Простое объяснение Почему у мужчин есть проблемы с эрекцией во время секса? Простое объяснение

Почему возникают проблемы с эрекцией и как с ними справиться?

ТехИнсайдер
10 признаков, что у ваших отношений нет будущего 10 признаков, что у ваших отношений нет будущего

Как понять, что у ваших отношений нет будущего?

Psychologies
Бальзам для души Бальзам для души

Химики определили состав древнеегипетских веществ для бальзамирования

N+1
Вода, отруби и ягоды: 5 продуктов для идеальной работы кишечника — советы врача Вода, отруби и ягоды: 5 продуктов для идеальной работы кишечника — советы врача

Что поможет улучшить пищеварение?

Psychologies
Совсем не соринка Совсем не соринка

Лечение конъюнктивита и что делать, чтобы он не появился снова

Лиза
Свободная касса Свободная касса

Как стать фрилансером и не жалеть об этом каждый месяц

VOICE
«Что подумают люди?»: как перестать подстраиваться под других — включите пофигизм «Что подумают люди?»: как перестать подстраиваться под других — включите пофигизм

Что такое «бюджет пофигизма» и как правильно распоряжаться ресурсами

Psychologies
Менструальный цикл: как гормоны влияют на женщин — 6 аспектов Менструальный цикл: как гормоны влияют на женщин — 6 аспектов

Как менструальный цикл влияет на женский организм

Psychologies
Сексомния существует. Что нужно знать о Сексомния существует. Что нужно знать о

Что такое сексомния?

ТехИнсайдер
Адаптация психики к кризису: 9 путей выживания Адаптация психики к кризису: 9 путей выживания

Отрывок из книги Элины Фроловой «Мы справимся»

Psychologies
Ученые случайно создали уникальный тип льда с аномальными свойствами: впервые на Земле Ученые случайно создали уникальный тип льда с аномальными свойствами: впервые на Земле

Ученые создали лед с плотностью почти такой же, как у жидкой воды

ТехИнсайдер
Альбом талантов Альбом талантов

У вас есть ощущение, что в жизни чего-то не хватает, но непонятно, что это?

Psychologies
Ямочки на щеках: почему появляются и можно ли их сделать Ямочки на щеках: почему появляются и можно ли их сделать

В чем особенности ямочек на щеках?

РБК
«Невежество» Эйзенштейна и нападки на Гайдая: как советское кино жило под цензурой «Невежество» Эйзенштейна и нападки на Гайдая: как советское кино жило под цензурой

Как СССР цензурировал кинематограф

Forbes
Сангвиник, холерик, флегматик, меланхолик: как типы темперамента проявляются у мужчин — взгляд психолога Сангвиник, холерик, флегматик, меланхолик: как типы темперамента проявляются у мужчин — взгляд психолога

Как четыре типа темперамента проявляются у мужчин и как с ними совладать

Psychologies
Русский Кортес Русский Кортес

Как проходил сибирский поход Ермака

Дилетант
Высокое искусство политической карикатуры: 23 детали гравюры «Времена» Уильяма Хогарта Высокое искусство политической карикатуры: 23 детали гравюры «Времена» Уильяма Хогарта

Жанр политической карикатуры расцвел в европейской культуре нового времени

Вокруг света
Муж в тени артистки: история жены Си Цзиньпина — первой леди Китая Пэн Лиюань Муж в тени артистки: история жены Си Цзиньпина — первой леди Китая Пэн Лиюань

Пэн Лиюань стала знаменитостью задолго до того, как весь Китай узнал имя ее мужа

Forbes
Драма в бетоне: московские новостройки уже не по карману покупателям Драма в бетоне: московские новостройки уже не по карману покупателям

На спросе новостроек сильно сказалось изменение условий «ипотеки от застройщика»

Forbes
Первый градусник, длинною в несколько метров!? Выясняем, как измеряли температуру тела до изобретения термометра Первый градусник, длинною в несколько метров!? Выясняем, как измеряли температуру тела до изобретения термометра

Как появился медицинский термометр?

ТехИнсайдер
Открыть в приложении