Чем хороша новая версия популярного бота от OpenAI GPT-4

ForbesHi-Tech

Четвертое измерение: что умеет новая языковая модель от OpenAI GPT-4

Манвел Аветисян

Фото Silas Stein / picture alliance via Getty Images

С момента появления ChatGPT в интернете уже разошлись мемы с вакансией «выключателя», который должен вытащить вилку из розетки, если ИИ внутри модели оживет. Директор по развитию прикладных проектов Института искусственного интеллекта AIRI Манвел Аветисян рассказывает о том, что сейчас умеет новая версия основы популярного бота GPT-4 и как релиз новинки от OpenAI отразится на нашей жизни.

Эволюция языковых моделей

Бурное развитие умных языковых ботов началось с довольно простой мысли: в виде текста можно представить огромное количество задач, а значит, можно научить модели ИИ эти задачи решать. В 2017 году появились трансформерные архитектуры, способные обучаться на больших объемах текстов. Чуть позже ученые совместили обучение с подкреплением (Reinforcement learning, RL, технология, которая позволяет «хвалить» программу за правильные действия и «наказывать» за неправильные) с большими языковыми моделями, такими, как GPT-3 (Large Language Models, LLM). Получился ChatGPT.

Представьте себе игру в шахматы: подкрепление в ней — это результат игры. Компьютерному агенту на основе искусственного интеллекта необходимо научиться делать ходы, которые приведут к победе. Люди способны действовать с подкреплением, удаленным на годы вперед, например, долго и усердно трудиться в школе и университете, чтобы получить первую зарплату. Компьютеру сложно выполнять длинные последовательности действий для достижения итогового результата, и разработчикам приходится учить ИИ «заглядывать вперед» при выборе следующего шага. Исследователи начали обучать модели, способные отвечать на вопросы человека и интегрировать в них огромные объемы человеческой обратной связи.

Среди основных прорывов, полученных исследователями в последнее время, можно отметить:

  • Toolformer, LLM от Meta (признана в России экстремистской организацией и запрещена): исследователи научили большие языковые модели обращаться к внешним инструментам (веб-поиску, переводчику, калькулятору).
  • LLaMA, LLM от Meta (признана экстремистской организацией на территории РФ): ученые доказали, что объем данных для обучения модели важнее, чем ее сложность. Более легкие по вычислительным ресурсам модели с большими выборками обучающих данных обошли большие модели в качестве решения прикладных задач.
  • ChatGPT на Bing научился указывать источники тех или иных фактов, которые он приводит в ответе на вопрос.

Плюсы и минусы нового движка

GPT-4 — последняя из больших языковых моделей семейства GPT от OpenAI: GPT-2, GPT-3 и GPT-3.5, которая легла в основу первой версии популярного бота ChatGPT. Модель состоит из большого количества нейросетей, которые умеют обрабатывать, понимать, анализировать, интерпретировать и генерировать тексты на естественном языке. Несмотря на то что четвертая версия модели понимает 28 языков, включая малоресурсные валлийский язык и урду (близкий к хинди язык индоевропейской семьи), наилучшие результаты по-прежнему можно получить, используя для создания промптов (так называются фразы-запросы к модели) английский.

GPT-4 прошел проверку эффективности на множестве экзаменов — как академических, так и профессиональных. Порой работы модели превосходили результаты большинства параллельно тестируемых людей. Например, на смоделированном экзамене для адвокатов (Uniform Bar Examination) GPT-4 оказалась среди 10% лучших участников теста, в то время как ChatGPT оказался среди худших 10%. Кроме того, согласно данным технического отчета OpenAI, сгенерированные GPT-4 ответы нравились тестовой группе пользователей в 70,2% случаев чаще, чем ответы GPT-3.5. Впрочем, по словам самих создателей, разница между ответами от двух версий бота может показаться незаметной в процессе работы с интерфейсом.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Камотли, он же батат Камотли, он же батат

Батат, сладкий картофель, — многолетняя травянистая лиана из семейства вьюнковых

Наука и жизнь
Системный анализ Системный анализ

Анастасия Волкова: российский арт-рынок — «непаханое поле возможностей»

Robb Report
25 вещей, которые на самом деле ненавидят женщины 25 вещей, которые на самом деле ненавидят женщины

Эта статья поможет тебе прожить чуть более счастливую и долгую жизнь

Maxim
Вспоминаем Саманту Смит — девочку, которая всполошила весь СССР своим приездом Вспоминаем Саманту Смит — девочку, которая всполошила весь СССР своим приездом

Как Саманта Смит посетила СССР в апогей холодной войны и ядерной паранойи

Maxim

Как Гизелла Перл решила помочь беременным узницам концлагеря

ТехИнсайдер
Детская забава Детская забава

Прыжки через скакалку – простой путь к стройности!

Лиза
Время сильных Время сильных

Bahh Tee и Turken — что ждет нашу музыкальную индустрию?

ЖАРА Magazine
Цвет имеет значение: как необычные драгоценные камни становятся выгодной инвестицией Цвет имеет значение: как необычные драгоценные камни становятся выгодной инвестицией

Почему стоит обратить внимание именно на цветные драгоценные камни?

Forbes
Полезные и вредные молекулы: как витамины и лекарства влияют на наше состояние Полезные и вредные молекулы: как витамины и лекарства влияют на наше состояние

Жизнь человека способна изменить одна молекула

Inc.
Чем рыбный жир отличается от рыбьего и какой из них полезнее? Чем рыбный жир отличается от рыбьего и какой из них полезнее?

Чем отличаются рыбий и рыбный жир и какова их польза для нашего организма?

ТехИнсайдер
Разгрузочный день Разгрузочный день

Полезные и безопасные варианты меню на разгрузочный день

Лиза
История Эрже — бельгийского художника и создателя Тинтина История Эрже — бельгийского художника и создателя Тинтина

Комиксы о Тинтине принесли Эрже не только всемирную славу

Правила жизни
Привычка, от которой вам следует избавиться: почему сидеть, скрестив ноги, вредно для здоровья? Привычка, от которой вам следует избавиться: почему сидеть, скрестив ноги, вредно для здоровья?

Понаблюдайте за собой: как вы привыкли сидеть?

ТехИнсайдер
Вторые на Луне Вторые на Луне

Как продвигается работа над космической программой Artemis?

ТехИнсайдер
Благоденствие из головы диктатора Благоденствие из головы диктатора

Зачем государству равенства в утопии «История севарамбов» нужен монарх

Weekend
Константин Куприянов: «Музей “Калифорния”» Константин Куприянов: «Музей “Калифорния”»

Отрывок из романа «Музей “Калифорния”», вышедшего в издательстве «Городец»

СНОБ
Стыдно признаться Стыдно признаться

За последние 15 лет распространенность «неприятных» инфекций выросла в 15 раз!

Лиза
Жалобы, игнорирование, саботаж: 10 признаков того, что вы пассивно-агрессивны Жалобы, игнорирование, саботаж: 10 признаков того, что вы пассивно-агрессивны

Накопленная агрессия обладает разрушительной силой, но нам сложно распознать ее

Psychologies
Боль и слова Боль и слова

Актеры сериала «Содержанки» – о любви

Новый очаг
Темнокожая Русалочка и феминизм: почему Disney переделывает старые сказки для зумеров Темнокожая Русалочка и феминизм: почему Disney переделывает старые сказки для зумеров

Шок-контент или поклонение перед зумерами: как Disney меняет свои сказки

Forbes
5 полезных продуктов, которые вызывают переедание: на них сложно похудеть 5 полезных продуктов, которые вызывают переедание: на них сложно похудеть

Некоторые здоровые продукты очень коварны — и лишь разжигают наш аппетит

VOICE
Ребенок блогера-сыроеда Максима Лютого умер от истощения. Почему люди «экспериментируют» на детях? Ребенок блогера-сыроеда Максима Лютого умер от истощения. Почему люди «экспериментируют» на детях?

Почему родители навязывают детям свой взгляд на питание?

Psychologies
Истории роста среди российских акций: стоит ли вкладываться и из чего выбрать Истории роста среди российских акций: стоит ли вкладываться и из чего выбрать

Часть из инвесторов обратили внимание на компании роста. Хорошая ли это идея?

Forbes
Сколько лун у Земли на самом деле? Сколько лун у Земли на самом деле?

Сколько лун вращалось вокруг Земли за всю историю планеты?

ТехИнсайдер
«Мы — однопланетяне» «Мы — однопланетяне»

Недавно Никита Ефремов получил премию «Золотой орел»

OK!
Что такое спидран или как пройти Atomic Heart за 6 минут? Что такое спидран или как пройти Atomic Heart за 6 минут?

Почему спидраны заслуживают вашего внимания?

CHIP
Не работает клавиатура на компьютере или ноутбуке: что делать? Не работает клавиатура на компьютере или ноутбуке: что делать?

Почему клавиатура компьютера или ноутбука может перестать работать?

CHIP
Прозрачное платье и микро-шорты: самые дерзкие студенческие наряды Кейт Миддлтон, вскружившие голову принцу Уильяму Прозрачное платье и микро-шорты: самые дерзкие студенческие наряды Кейт Миддлтон, вскружившие голову принцу Уильяму

Как обычная девушка из университета смогла покорить наследника престола?

VOICE
Еще один способ борьбы со стрессом: дыхательная гимнастика Еще один способ борьбы со стрессом: дыхательная гимнастика

Как правильно дышать в сложных ситуациях

Правила жизни
Клиника, мать и два дитя Клиника, мать и два дитя

«Медея»: русский хоррор осваивает античный миф

Weekend
Открыть в приложении