Чем хороша новая версия популярного бота от OpenAI GPT-4

ForbesHi-Tech

Четвертое измерение: что умеет новая языковая модель от OpenAI GPT-4

Манвел Аветисян

Фото Silas Stein / picture alliance via Getty Images

С момента появления ChatGPT в интернете уже разошлись мемы с вакансией «выключателя», который должен вытащить вилку из розетки, если ИИ внутри модели оживет. Директор по развитию прикладных проектов Института искусственного интеллекта AIRI Манвел Аветисян рассказывает о том, что сейчас умеет новая версия основы популярного бота GPT-4 и как релиз новинки от OpenAI отразится на нашей жизни.

Эволюция языковых моделей

Бурное развитие умных языковых ботов началось с довольно простой мысли: в виде текста можно представить огромное количество задач, а значит, можно научить модели ИИ эти задачи решать. В 2017 году появились трансформерные архитектуры, способные обучаться на больших объемах текстов. Чуть позже ученые совместили обучение с подкреплением (Reinforcement learning, RL, технология, которая позволяет «хвалить» программу за правильные действия и «наказывать» за неправильные) с большими языковыми моделями, такими, как GPT-3 (Large Language Models, LLM). Получился ChatGPT.

Представьте себе игру в шахматы: подкрепление в ней — это результат игры. Компьютерному агенту на основе искусственного интеллекта необходимо научиться делать ходы, которые приведут к победе. Люди способны действовать с подкреплением, удаленным на годы вперед, например, долго и усердно трудиться в школе и университете, чтобы получить первую зарплату. Компьютеру сложно выполнять длинные последовательности действий для достижения итогового результата, и разработчикам приходится учить ИИ «заглядывать вперед» при выборе следующего шага. Исследователи начали обучать модели, способные отвечать на вопросы человека и интегрировать в них огромные объемы человеческой обратной связи.

Среди основных прорывов, полученных исследователями в последнее время, можно отметить:

  • Toolformer, LLM от Meta (признана в России экстремистской организацией и запрещена): исследователи научили большие языковые модели обращаться к внешним инструментам (веб-поиску, переводчику, калькулятору).
  • LLaMA, LLM от Meta (признана экстремистской организацией на территории РФ): ученые доказали, что объем данных для обучения модели важнее, чем ее сложность. Более легкие по вычислительным ресурсам модели с большими выборками обучающих данных обошли большие модели в качестве решения прикладных задач.
  • ChatGPT на Bing научился указывать источники тех или иных фактов, которые он приводит в ответе на вопрос.

Плюсы и минусы нового движка

GPT-4 — последняя из больших языковых моделей семейства GPT от OpenAI: GPT-2, GPT-3 и GPT-3.5, которая легла в основу первой версии популярного бота ChatGPT. Модель состоит из большого количества нейросетей, которые умеют обрабатывать, понимать, анализировать, интерпретировать и генерировать тексты на естественном языке. Несмотря на то что четвертая версия модели понимает 28 языков, включая малоресурсные валлийский язык и урду (близкий к хинди язык индоевропейской семьи), наилучшие результаты по-прежнему можно получить, используя для создания промптов (так называются фразы-запросы к модели) английский.

GPT-4 прошел проверку эффективности на множестве экзаменов — как академических, так и профессиональных. Порой работы модели превосходили результаты большинства параллельно тестируемых людей. Например, на смоделированном экзамене для адвокатов (Uniform Bar Examination) GPT-4 оказалась среди 10% лучших участников теста, в то время как ChatGPT оказался среди худших 10%. Кроме того, согласно данным технического отчета OpenAI, сгенерированные GPT-4 ответы нравились тестовой группе пользователей в 70,2% случаев чаще, чем ответы GPT-3.5. Впрочем, по словам самих создателей, разница между ответами от двух версий бота может показаться незаметной в процессе работы с интерфейсом.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Почему женщины ненавидят: что такое женская мизогиния и как она влияет на гендерное равенство Почему женщины ненавидят: что такое женская мизогиния и как она влияет на гендерное равенство

Мизогиния: в чем причина неприязни женщин друг к другу?

Esquire
Садо-мазо в сексе: экзотические увлечения или компенсация внутренних конфликтов? Садо-мазо в сексе: экзотические увлечения или компенсация внутренних конфликтов?

Что на самом деле побуждает людей к увлечению БДСМ?

Psychologies
25 вещей, которые на самом деле ненавидят женщины 25 вещей, которые на самом деле ненавидят женщины

Эта статья поможет тебе прожить чуть более счастливую и долгую жизнь

Maxim
«Взять аскезу» на желание: как духовная практика превратилась в популярную сделку «Взять аскезу» на желание: как духовная практика превратилась в популярную сделку

Почему после снятия реальных ограничений люди начали накладывать их на себя сами

Forbes
Режиссер Масааки Юаса: Я хотел бы сделать анимацию, которую наш глаз не отличит от фотореалистичного изображения Режиссер Масааки Юаса: Я хотел бы сделать анимацию, которую наш глаз не отличит от фотореалистичного изображения

Интервью с аниматором Масааки Юасой о его фильме «Ину-о: Рождение легенды»

СНОБ
Найден способ исцеления мерцательной аритмии без хирургического вмешательства Найден способ исцеления мерцательной аритмии без хирургического вмешательства

Процедура, которая может стать одним из методов лечения мерцательной аритмии

ТехИнсайдер
Мамины дочки в Голливуде: краткий обзор главных женских архетипов в кино Мамины дочки в Голливуде: краткий обзор главных женских архетипов в кино

Как в кино обычные женщиныборолись на экране и вне его за себя и других

Правила жизни
Ипотека от нуля Ипотека от нуля

Как и почему ЦБ борется с нулевыми процентами по ипотеке

Деньги
Равные зарплаты и декретный отпуск для отцов: как IKEA добилась гендерного равенства Равные зарплаты и декретный отпуск для отцов: как IKEA добилась гендерного равенства

IKEA добилась гендерного равенства среди руководителей на международном уровне

Forbes
Ради блога Ради блога

Insight People стало крупнейшим креативным кластером в России

Robb Report
«Мать женских прав»: как нигерийская активистка бросила вызов самому королю «Мать женских прав»: как нигерийская активистка бросила вызов самому королю

Фунмилайо Рэнсем-Кути — одна из ключевых фигур борьбы за женские права в Нигерии

Forbes
«Google уже не тот»: почему сотрудники компании недовольны своим гендиректором «Google уже не тот»: почему сотрудники компании недовольны своим гендиректором

Как генеральный директор компании Google сам себя загнал в угол

Forbes
7 страшно интересных фактов о фильмах «Мумия» 7 страшно интересных фактов о фильмах «Мумия»

Настала пора вспомнить ошеломительных «Мумий» с Бренданом Фрейзером

Maxim
Был беженцем, стал звездой: виражи судьбы Ке Хью Квана — первого актера вьетнамского происхождения с Был беженцем, стал звездой: виражи судьбы Ке Хью Квана — первого актера вьетнамского происхождения с

Биография вьетнамского актера Ке Хью Квана достойна экранизации

VOICE
Пища для души Пища для души

Великий пост – это своеобразная «диета» души и тела

Лиза
Екатерина Гусева: «Счастливый человек светится изнутри» Екатерина Гусева: «Счастливый человек светится изнутри»

Актриса Екатерина Гусева — о секретах своей красоты, молодости и оптимизма

Здоровье
Лидия Метельская Лидия Метельская

Лидия Метельская строит параллельный мир Meowshka из белоснежных котиков

Собака.ru
Вирусы в роутере: почему они так опасны и что делать в случае заражения Вирусы в роутере: почему они так опасны и что делать в случае заражения

Как понять, что ваш роутер заражен?

CHIP
Почему нельзя покупать подержанную Toyota Camry. 10 главных причин Почему нельзя покупать подержанную Toyota Camry. 10 главных причин

Проблемы, которые может преподнести подержанная Toyota Camry

РБК
Навстречу новой жизни Навстречу новой жизни

Как разлюбить человека, если отношения зашли в тупик

Лиза
Что такое дорамы и чем они отличаются от остальных сериалов? Что такое дорамы и чем они отличаются от остальных сериалов?

Небольшой экскурс во вселенную японских и корейских сериалов

Maxim
Просрочили кредит? Машина уедет от вас сама: Ford запатентовал новую технологию Просрочили кредит? Машина уедет от вас сама: Ford запатентовал новую технологию

Теперь авто само поедет к эвакуатору или на свалку, если вы просрочите платеж

ТехИнсайдер
«Титаник»: разные судьбы. Реальные истории спасшихся и погибших пассажиров «Титаник»: разные судьбы. Реальные истории спасшихся и погибших пассажиров

Как сложились судьбы людей, попавших на «Титаник»

Караван историй
Ставка на ценность: как покорить биржу акциями скучных компаний Ставка на ценность: как покорить биржу акциями скучных компаний

Для фондового менеджера Клиффорда Аснесса настал час возмездия

Forbes
Лунная пыль. Как космическая разработка может остановить изменение климата на Земле Лунная пыль. Как космическая разработка может остановить изменение климата на Земле

Какие еще технологии применяют для того, чтобы охладить планету

СНОБ
Как IT-сервисы проходят путь от внутреннего инструмента до публичного решения Как IT-сервисы проходят путь от внутреннего инструмента до публичного решения

Как множество компаний создают внутренние инструменты для своих целей

Forbes
«Некрасивых женщин не бывает…»: как связаны алкоголь и сексуализированные преступления «Некрасивых женщин не бывает…»: как связаны алкоголь и сексуализированные преступления

Почему большинство преступлений совершается именно под действием алкоголя?

Psychologies
«Достаточно хорошая мать»: как Дональд Вудс Винникотт научил нас не волноваться и любить родительство — 4 главные идеи «Достаточно хорошая мать»: как Дональд Вудс Винникотт научил нас не волноваться и любить родительство — 4 главные идеи

Как педиатр убедил людей в том, они и так способны дать детям все необходимое?

Psychologies
5 захватывающих книг в духе «Одни из нас» 5 захватывающих книг в духе «Одни из нас»

Книги с пробирающей атмосферой постапокалипсиса

Maxim
Могут ли существовать планеты, состоящие из темной материи? И, если да, то как их обнаружить? Могут ли существовать планеты, состоящие из темной материи? И, если да, то как их обнаружить?

Но что, если в космосе есть планеты, состоящие из частиц вне Стандартной модели?

ТехИнсайдер
Открыть в приложении