Чем хороша новая версия популярного бота от OpenAI GPT-4

ForbesHi-Tech

Четвертое измерение: что умеет новая языковая модель от OpenAI GPT-4

Манвел Аветисян

Фото Silas Stein / picture alliance via Getty Images

С момента появления ChatGPT в интернете уже разошлись мемы с вакансией «выключателя», который должен вытащить вилку из розетки, если ИИ внутри модели оживет. Директор по развитию прикладных проектов Института искусственного интеллекта AIRI Манвел Аветисян рассказывает о том, что сейчас умеет новая версия основы популярного бота GPT-4 и как релиз новинки от OpenAI отразится на нашей жизни.

Эволюция языковых моделей

Бурное развитие умных языковых ботов началось с довольно простой мысли: в виде текста можно представить огромное количество задач, а значит, можно научить модели ИИ эти задачи решать. В 2017 году появились трансформерные архитектуры, способные обучаться на больших объемах текстов. Чуть позже ученые совместили обучение с подкреплением (Reinforcement learning, RL, технология, которая позволяет «хвалить» программу за правильные действия и «наказывать» за неправильные) с большими языковыми моделями, такими, как GPT-3 (Large Language Models, LLM). Получился ChatGPT.

Представьте себе игру в шахматы: подкрепление в ней — это результат игры. Компьютерному агенту на основе искусственного интеллекта необходимо научиться делать ходы, которые приведут к победе. Люди способны действовать с подкреплением, удаленным на годы вперед, например, долго и усердно трудиться в школе и университете, чтобы получить первую зарплату. Компьютеру сложно выполнять длинные последовательности действий для достижения итогового результата, и разработчикам приходится учить ИИ «заглядывать вперед» при выборе следующего шага. Исследователи начали обучать модели, способные отвечать на вопросы человека и интегрировать в них огромные объемы человеческой обратной связи.

Среди основных прорывов, полученных исследователями в последнее время, можно отметить:

  • Toolformer, LLM от Meta (признана в России экстремистской организацией и запрещена): исследователи научили большие языковые модели обращаться к внешним инструментам (веб-поиску, переводчику, калькулятору).
  • LLaMA, LLM от Meta (признана экстремистской организацией на территории РФ): ученые доказали, что объем данных для обучения модели важнее, чем ее сложность. Более легкие по вычислительным ресурсам модели с большими выборками обучающих данных обошли большие модели в качестве решения прикладных задач.
  • ChatGPT на Bing научился указывать источники тех или иных фактов, которые он приводит в ответе на вопрос.

Плюсы и минусы нового движка

GPT-4 — последняя из больших языковых моделей семейства GPT от OpenAI: GPT-2, GPT-3 и GPT-3.5, которая легла в основу первой версии популярного бота ChatGPT. Модель состоит из большого количества нейросетей, которые умеют обрабатывать, понимать, анализировать, интерпретировать и генерировать тексты на естественном языке. Несмотря на то что четвертая версия модели понимает 28 языков, включая малоресурсные валлийский язык и урду (близкий к хинди язык индоевропейской семьи), наилучшие результаты по-прежнему можно получить, используя для создания промптов (так называются фразы-запросы к модели) английский.

GPT-4 прошел проверку эффективности на множестве экзаменов — как академических, так и профессиональных. Порой работы модели превосходили результаты большинства параллельно тестируемых людей. Например, на смоделированном экзамене для адвокатов (Uniform Bar Examination) GPT-4 оказалась среди 10% лучших участников теста, в то время как ChatGPT оказался среди худших 10%. Кроме того, согласно данным технического отчета OpenAI, сгенерированные GPT-4 ответы нравились тестовой группе пользователей в 70,2% случаев чаще, чем ответы GPT-3.5. Впрочем, по словам самих создателей, разница между ответами от двух версий бота может показаться незаметной в процессе работы с интерфейсом.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Большая Засечная черта. Часть 2 Большая Засечная черта. Часть 2

История одного из крупнейших фортификационных сооружений Российского государства

Культура.РФ
Игроки в го очень быстро учатся у ИИ и еще смогут составить ему конкуренцию Игроки в го очень быстро учатся у ИИ и еще смогут составить ему конкуренцию

Человеку тоже есть чему поучиться у искусственного интеллекта

ТехИнсайдер
Гормон-шило Гормон-шило

Новые открытия о нашем главном гормоне – тестостероне

Maxim
Психолог — о возрастных стереотипах и «третьей молодости» Психолог — о возрастных стереотипах и «третьей молодости»

Как наслаждаться второй половиной жизни?

РБК
Как быстро убрать живот и привести себя в форму Как быстро убрать живот и привести себя в форму

Что делать, если покрасоваться подтянутой фигурой хочется уже сейчас?

ТехИнсайдер
Недалеко от алтаря средневековой английской церкви нашли останки больной сифилисом затворницы Недалеко от алтаря средневековой английской церкви нашли останки больной сифилисом затворницы

Археологи обнаружили захоронение женщины 30–50 лет, умершей в XV–XVI веке

N+1
Король меланхолии, царь грусти: почему все так любят Бена Аффлека Король меланхолии, царь грусти: почему все так любят Бена Аффлека

Почему скучающий Аффлек — единственная знаменитость, поистине близкая к народу

Правила жизни
Как вести себя на первом свидании, чтобы оно не стало последним: 2 главных правила Как вести себя на первом свидании, чтобы оно не стало последним: 2 главных правила

Секреты, которые помогут снять напряжение во время первой встречи

Psychologies
Спокойствие, только спокойствие! Спокойствие, только спокойствие!

Можно ли самостоятельно балансировать душевные и телесные настройки?

Psychologies
Реально ли изменить мышление с помощью аффирмаций? Реально ли изменить мышление с помощью аффирмаций?

Изучаем эффективный способ сознательно менять направление потока мыслей

ТехИнсайдер
12 качеств, которые все ошибочно считают признаком ума 12 качеств, которые все ошибочно считают признаком ума

Как просто выявить фальшивого интеллектуала

Maxim
Жизнь остановилась: как пережить утрату близкого Жизнь остановилась: как пережить утрату близкого

Как помочь себе справиться с горем?

Psychologies
Почему люди по всему миру смеются над падениями Почему люди по всему миру смеются над падениями

На протяжении всей истории человек искренне смеется над падающим человеком

ТехИнсайдер
Оптимизм и пессимизм: какой взгляд на мир выигрышнее — мнение психолога Оптимизм и пессимизм: какой взгляд на мир выигрышнее — мнение психолога

Насколько сильно наша жизнь зависит от того, какую оптику мы выбираем?

Psychologies
Скульптурный портрет Евгения Богарне. Возвращение из «Небытия» Скульптурный портрет Евгения Богарне. Возвращение из «Небытия»

Мраморный бюст, который поступил в Государственный Русский музей в 1927 году

Наука и жизнь
Крах диктатуры, биографии Черчилля и Наполеона: самый ожидаемый нон-фикшен 2023 года Крах диктатуры, биографии Черчилля и Наполеона: самый ожидаемый нон-фикшен 2023 года

Календарь выхода наиболее интересных новинок в жанре нон-фикшен в 2023 год

Forbes
«Секс по расписанию изменил нашу жизнь»: личная история — попробуйте с партнером «Секс по расписанию изменил нашу жизнь»: личная история — попробуйте с партнером

История, как секс по расписанию может изменить отношения с партнером

Psychologies
14 способов признаться себе в любви не только на словах 14 способов признаться себе в любви не только на словах

Чтобы дарить любовь другим людям, важно сначала позаботиться о себе

Правила жизни
Как запрещено одеваться невысоким девушкам: учимся на ошибках звезд Как запрещено одеваться невысоким девушкам: учимся на ошибках звезд

Подборка трендов, которые не стоит повторять за любимыми звездными дюймовочками!

VOICE
Время фрагментации Время фрагментации

Мировая экономика разрушается, а не деглобализируется

Деньги
Лечение без рецепта Лечение без рецепта

Может ли визуализация (представление чего-либо) влиять на наше самочувствие?

Добрые советы

Как возникают мифы о женщинах и кто их распространяет

VOICE
Полуостров вулканов Полуостров вулканов

Камчатка — самая вулканически активная зона планеты

Вокруг света
10 вопросов детскому стоматологу 10 вопросов детскому стоматологу

Частые вопросы про детские зубы, которые волнуют мамочек

Лиза
Древнейшие инструменты, найденные археологами, скорее всего изготовили не предки современного человека Древнейшие инструменты, найденные археологами, скорее всего изготовили не предки современного человека

Археологи обнаружили самые древние из когда-либо найденных каменных орудий

ТехИнсайдер
Откровенная безвкусица: такую верхнюю одежду на весну не будет носить ни одна модная девушка Откровенная безвкусица: такую верхнюю одежду на весну не будет носить ни одна модная девушка

Проведем фэшн-ревизию и проверим твой шкаф на наличие опасных элементов

VOICE
Как выглядели пирамиды Гизы на момент постройки: драгоценные камни Египта Как выглядели пирамиды Гизы на момент постройки: драгоценные камни Египта

На момент постройки пирамиды Гизы были покрыты блестящей осадочной породой

ТехИнсайдер
Отдых в горах: 8 слагаемых успеха Отдых в горах: 8 слагаемых успеха

Важные составляющие качественного отдыха на горнолыжном курорте

СНОБ
«Да просто сделай уже это»: почему сериал «Терапия» не спасает даже Харрисон Форд «Да просто сделай уже это»: почему сериал «Терапия» не спасает даже Харрисон Форд

«Терапия»: почему правила ситкомов не работают в реальном мире

Forbes
Маменькин китенок: почему косатка всю жизнь заботится о единственном сыне? Маменькин китенок: почему косатка всю жизнь заботится о единственном сыне?

Если самка косатки родила мальчика, он остается ее единственным отпрыском

Вокруг света
Открыть в приложении