Чем хороша новая версия популярного бота от OpenAI GPT-4

ForbesHi-Tech

Четвертое измерение: что умеет новая языковая модель от OpenAI GPT-4

Манвел Аветисян

Фото Silas Stein / picture alliance via Getty Images

С момента появления ChatGPT в интернете уже разошлись мемы с вакансией «выключателя», который должен вытащить вилку из розетки, если ИИ внутри модели оживет. Директор по развитию прикладных проектов Института искусственного интеллекта AIRI Манвел Аветисян рассказывает о том, что сейчас умеет новая версия основы популярного бота GPT-4 и как релиз новинки от OpenAI отразится на нашей жизни.

Эволюция языковых моделей

Бурное развитие умных языковых ботов началось с довольно простой мысли: в виде текста можно представить огромное количество задач, а значит, можно научить модели ИИ эти задачи решать. В 2017 году появились трансформерные архитектуры, способные обучаться на больших объемах текстов. Чуть позже ученые совместили обучение с подкреплением (Reinforcement learning, RL, технология, которая позволяет «хвалить» программу за правильные действия и «наказывать» за неправильные) с большими языковыми моделями, такими, как GPT-3 (Large Language Models, LLM). Получился ChatGPT.

Представьте себе игру в шахматы: подкрепление в ней — это результат игры. Компьютерному агенту на основе искусственного интеллекта необходимо научиться делать ходы, которые приведут к победе. Люди способны действовать с подкреплением, удаленным на годы вперед, например, долго и усердно трудиться в школе и университете, чтобы получить первую зарплату. Компьютеру сложно выполнять длинные последовательности действий для достижения итогового результата, и разработчикам приходится учить ИИ «заглядывать вперед» при выборе следующего шага. Исследователи начали обучать модели, способные отвечать на вопросы человека и интегрировать в них огромные объемы человеческой обратной связи.

Среди основных прорывов, полученных исследователями в последнее время, можно отметить:

  • Toolformer, LLM от Meta (признана в России экстремистской организацией и запрещена): исследователи научили большие языковые модели обращаться к внешним инструментам (веб-поиску, переводчику, калькулятору).
  • LLaMA, LLM от Meta (признана экстремистской организацией на территории РФ): ученые доказали, что объем данных для обучения модели важнее, чем ее сложность. Более легкие по вычислительным ресурсам модели с большими выборками обучающих данных обошли большие модели в качестве решения прикладных задач.
  • ChatGPT на Bing научился указывать источники тех или иных фактов, которые он приводит в ответе на вопрос.

Плюсы и минусы нового движка

GPT-4 — последняя из больших языковых моделей семейства GPT от OpenAI: GPT-2, GPT-3 и GPT-3.5, которая легла в основу первой версии популярного бота ChatGPT. Модель состоит из большого количества нейросетей, которые умеют обрабатывать, понимать, анализировать, интерпретировать и генерировать тексты на естественном языке. Несмотря на то что четвертая версия модели понимает 28 языков, включая малоресурсные валлийский язык и урду (близкий к хинди язык индоевропейской семьи), наилучшие результаты по-прежнему можно получить, используя для создания промптов (так называются фразы-запросы к модели) английский.

GPT-4 прошел проверку эффективности на множестве экзаменов — как академических, так и профессиональных. Порой работы модели превосходили результаты большинства параллельно тестируемых людей. Например, на смоделированном экзамене для адвокатов (Uniform Bar Examination) GPT-4 оказалась среди 10% лучших участников теста, в то время как ChatGPT оказался среди худших 10%. Кроме того, согласно данным технического отчета OpenAI, сгенерированные GPT-4 ответы нравились тестовой группе пользователей в 70,2% случаев чаще, чем ответы GPT-3.5. Впрочем, по словам самих создателей, разница между ответами от двух версий бота может показаться незаметной в процессе работы с интерфейсом.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Принцип 2:1:1 Принцип 2:1:1

Правила здорового завтрака

Лиза
Актеры и главные герои сериала Актеры и главные герои сериала

Рассказываем о ролях и актерах турецкого сериала "Истерзанная"

VOICE
Олимпийская спортсменка сменила коньки на эротические фото: кто такая Александра Янкулеску и что она делает на OnlyFans Олимпийская спортсменка сменила коньки на эротические фото: кто такая Александра Янкулеску и что она делает на OnlyFans

Канадская рекордсменка румынского происхождения продает свои обнаженные фото

Maxim
Живопись Живопись

«Черный квадрат» Малевича стал для авангарда великолепным символом

Правила жизни
Ускользающая красота Ускользающая красота

Почему вымирают бабочки и что теряет с их уходом наша планета

Вокруг света
6 мужских недостатков, на которые женщины на самом деле не обращают внимания 6 мужских недостатков, на которые женщины на самом деле не обращают внимания

Если ты комплексуешь по любому из этих поводов, срочно переставай!

Maxim
Агенты паранойи Агенты паранойи

Как манга о Холодной войне вскрывает травмы современной Японии

Weekend
Вулканы, волны, вертолеты: чем заняться на Камчатке Вулканы, волны, вертолеты: чем заняться на Камчатке

Побывать на Камчатке хоть раз в жизни нужно каждому

РБК
Беннифер навсегда: история любви Дженнифер Лопес и Бена Аффлека — 20 лет назад и сейчас Беннифер навсегда: история любви Дженнифер Лопес и Бена Аффлека — 20 лет назад и сейчас

Как Дженнифер Лопес и Бен Аффлек прошли через роман расставание и воссоединение

Правила жизни
Историк-медиевист — о продолжительности жизни в Средние века Историк-медиевист — о продолжительности жизни в Средние века

Как средневековый мир относился к юности, старости и всему, что между

РБК
Кирилл Гребенщиков: «За пять минут до начала иногда думаю: «Вот бы все отменили и не пришлось выходить на сцену!» Но потом это отступает...» Кирилл Гребенщиков: «За пять минут до начала иногда думаю: «Вот бы все отменили и не пришлось выходить на сцену!» Но потом это отступает...»

Популярность — это результат, а для меня всегда важен процесс

Караван историй
По своим правилам: почему борцы с коррупцией в России не нуждаются в чужих советах По своим правилам: почему борцы с коррупцией в России не нуждаются в чужих советах

Для российской правоохранительной системы борьба с коррупцией — рутинный процесс

Forbes
Вы будете удивлены: почему кошки мнут нас лапками, спят в лотке, а потом усаживаются на лицо? Вы будете удивлены: почему кошки мнут нас лапками, спят в лотке, а потом усаживаются на лицо?

Если ваш кот постоянно поворачивается к вам задом, то вы счастливый человек!

ТехИнсайдер
Смерть отца и анорексия: 8 фактов о Кейт Бекинсейл, которых ты не знала Смерть отца и анорексия: 8 фактов о Кейт Бекинсейл, которых ты не знала

8 увлекательных фактов о Кейт Бекинсейл

VOICE
Как воспитать ребенка с безопасным типом привязанности: 7 главных шагов — попробуйте на практике Как воспитать ребенка с безопасным типом привязанности: 7 главных шагов — попробуйте на практике

Как воспитать уверенного в себе человека? Начать с привязанности к родителям

Psychologies
Надежда и сопричастность: 5 эмоций людей, на которые делают ставку политики Надежда и сопричастность: 5 эмоций людей, на которые делают ставку политики

Какие эмоции становятся мишенью охотников за голосами и народной любовью?

Psychologies
Ужас и красота Ужас и красота

Почему некоторые воспринимают бабочек символом невыразимого ужаса

Вокруг света
Мы идем по Африке: как бывший врач стал организатором охотничьих сафари в ЮАР Мы идем по Африке: как бывший врач стал организатором охотничьих сафари в ЮАР

Бывший врач Георгий Рагозин строит бизнес исходя из своих увлечений

Forbes
Этот Ford Bronco 1968 года с двигателем Coyote, способен разорвать любое бездорожье Этот Ford Bronco 1968 года с двигателем Coyote, способен разорвать любое бездорожье

Ford Bronco, определивший внедорожные тренды на много десятилетий вперёд

4x4 Club
Правила жизни Бена Аффлека Правила жизни Бена Аффлека

Правила жизни актера Бена Аффлека

Правила жизни
С едой на С едой на

РПП: что это за зверь такой и как это расстройство проявляется?

VOICE
Архитектура Архитектура

Революция даже архитектуре придавала нездоровый драматизм

Правила жизни
Родинки Родинки

Чтобы родинки не причинили больших неприятностей, их надо регулярно проверять

Здоровье
Эта картинка оценит ваш уровень тревоги на данный момент: проверьте свое состояние Эта картинка оценит ваш уровень тревоги на данный момент: проверьте свое состояние

В каком эмоциональном состоянии вы сейчас находитесь?

ТехИнсайдер
Если она вернулась Если она вернулась

Корь у детей: симптомы, лечение и почему этой болезни так боятся

Лиза
Быстрее гиперзвука: величайший космический рекорд, поставленный крышкой от люка Быстрее гиперзвука: величайший космический рекорд, поставленный крышкой от люка

Нет ничего удивительного в том, что инопланетяне не вступают с нами в контакт

Maxim
Прозрачное платье и микро-шорты: самые дерзкие студенческие наряды Кейт Миддлтон, вскружившие голову принцу Уильяму Прозрачное платье и микро-шорты: самые дерзкие студенческие наряды Кейт Миддлтон, вскружившие голову принцу Уильяму

Как обычная девушка из университета смогла покорить наследника престола?

VOICE
«Лишний»: что такое моббинг и какие у него бывают последствия «Лишний»: что такое моббинг и какие у него бывают последствия

Высмеивание, распускание слухов, социальная изоляция — приметы моббинга

Psychologies
Стоматолог в США убил свою жену, отравляя ее протеиновые коктейли. Семейная трагедия Стоматолог в США убил свою жену, отравляя ее протеиновые коктейли. Семейная трагедия

Джеймс Крейг убил супругу, чтобы начать новую жизнь с новым любовным партнером

ТехИнсайдер
Лесные соседи Лесные соседи

Едва только март начинает прогревать поля, как в воздухе начинаются брожения

Наука и жизнь
Открыть в приложении