Компания OpenAI представила мультимодальную генеративную модель GPT-4o

N+1Hi-Tech

OpenAI представила мультимодальную генеративную модель GPT-4o

Она умеет разговаривать, видеть, и имитирует эмоции

Андрей Фокин

0feba817682cb3557f5dd3b9a38f3ae7.jpg
OpenAI / YouTube

Компания OpenAI представила мультимодальную генеративную модель GPT-4o, которая может работать с текстом, аудио и изображениями, включая видео. Модель может общаться с пользователем голосом и поддерживает 50 языков. Она может имитировать различные интонации, шепот, пение, смех. При этом модель работает гораздо быстрее предшествующей версии — время задержки ответа в голосовом режиме составляет в среднем около 0,3 секунды, что сравнимо с временем реакции человека. Также модель может видеть, получая и интерпретируя изображение с камеры в реальном времени. Трансляция презентации велась на YouTube.

Первая генеративная языковая модель уровня GPT-4 была представлена компанией OpenAI в марте 2023 года. В отличие от более ранней версии GPT-3.5, которая могла работать только с текстовой информацией, GPT-4 впервые получила способность принимать в качестве входных данных также и изображения. Кроме этого, в том же году состоялся релиз приложения на основе чат-бота ChatGPT с возможностью распознавания речи и синтеза голоса, что позволяло пользователям разговаривать с моделью и использовать ее в роли голосового ассистента.

В понедельник 13 мая 2024 года во время прямой трансляции на YouTube состоялась презентация новой версии GPT-4, которая получила обозначение GPT-4o (символ «о» в конце означает «omni»). Теперь модель принимает в качестве входных данных любую комбинацию текста, звука и изображения, включая видео. При этом она работает гораздо быстрее своей предшественницы, в том числе и во время голосового общения. Генерация ответа происходит со средней задержкой всего лишь 320 миллисекунд, что сравнимо со временем реакции человека в разговоре.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Разгадки природы Разгадки природы

Семь чудесных тайн природы, которые перестали быть тайнами

Maxim
В каком виски нет красителей? В каком виски нет красителей?

Зачем в виски добавляют красители и другие добавки?

Maxim
Проблемы первого мира: как Джефф Дэниелс спасает бизнес-империю от краха Проблемы первого мира: как Джефф Дэниелс спасает бизнес-империю от краха

«Мужчина в полный рост»: история о строительном магнате, который теряет империю

Forbes
Гаджетомания: как проектируют внешний вид современных устройств Гаджетомания: как проектируют внешний вид современных устройств

Как выглядели первые телефоны, почему дизайн влияет на психологию потребителя?

Правила жизни
Мать русского футуризма. Как жил и писал поэт-авиатор Василий Каменский Мать русского футуризма. Как жил и писал поэт-авиатор Василий Каменский

Как поэт Василий Каменский стал одним из первых русских авиаторов

СНОБ
Галина Данелия: «Никогда бы не подумала, что пройдут годы, и Данелия станет моим мужем» Галина Данелия: «Никогда бы не подумала, что пройдут годы, и Данелия станет моим мужем»

Москва буквально кипела, когда я выходила замуж за Данелию

Коллекция. Караван историй
Психологические травмы: чем они могут быть полезны — беседа с психотерапевтом Психологические травмы: чем они могут быть полезны — беседа с психотерапевтом

Что такое травма? Чем она опасна как для нас, так и для окружающих?

Psychologies
Еще по одной: 10 мини-сериалов, которые можно посмотреть за вечер Еще по одной: 10 мини-сериалов, которые можно посмотреть за вечер

Необычные мини-сериалы, которые вы могли пропустить

Правила жизни
Во имя отца, сына и святого лука: все о непростых отношениях моды и христианства Во имя отца, сына и святого лука: все о непростых отношениях моды и христианства

Вспоминаем самые яркие союзы моды и церкви, заключенные на небесах

Правила жизни
Россиянки поделились историями о неадекватных свекровях: почему их так много? Россиянки поделились историями о неадекватных свекровях: почему их так много?

Как жить, если ваша родственница позволяет себе неприемлемые вещи

Psychologies
10 цитат Алеси Кафельниковой о важности психотерапии и умении принимать себя 10 цитат Алеси Кафельниковой о важности психотерапии и умении принимать себя

Цитаты Алеси Кафельниковой — символа российского гламура нового поколения

Psychologies
Развиваем позитивно Развиваем позитивно

Опыт внедрения концепции профилактики детского и подросткового неблагополучия

Позитивные изменения
«Их глаза видели бога»: лучшая история любви всех времен по мнению Опры Уинфри «Их глаза видели бога»: лучшая история любви всех времен по мнению Опры Уинфри

Отрывок из романа Зоры Нил Херстон «Их глаза видели бога»

Forbes
Было больно: MAXIM одним из первых посмотрел «Майор Гром: Игра» Было больно: MAXIM одним из первых посмотрел «Майор Гром: Игра»

Стала ли «Майор Гром: Игра» новым уровнем для российского кино?

Maxim
Новые улики: как тру-крайм-сериалы и подкасты помогают в реальных расследованиях Новые улики: как тру-крайм-сериалы и подкасты помогают в реальных расследованиях

Тру-крайм проекты, которые помогли сдвинуть расследования с мертвых точек

Forbes
Умение держать себя в руках Умение держать себя в руках

Как научить ребенка контролировать свои хотелки и эмоции?

Здоровье
5 причин нежелания выходить замуж 5 причин нежелания выходить замуж

Что делать, если нет реального желания связать с кем-то жизнь?

Psychologies
Как продлить жизнь стиральной машине: 12 простых советов мастеров по ремонту Как продлить жизнь стиральной машине: 12 простых советов мастеров по ремонту

Эти советы по уходу за стиральной машиной стоит знать

VOICE
«Догони цыпленка», неприличный этаж и битва с трамваями: удивительные и смешные факты о конке «Догони цыпленка», неприличный этаж и битва с трамваями: удивительные и смешные факты о конке

Работа конки на самом деле была полна неуклюжих и комичных моментов

ТехИнсайдер
Загадка «ангарского цветка» Загадка «ангарского цветка»

Ученые находят растения, которые относят к цветковым, в слоях юрского периода

Наука и техника
Заплатить за свидание: как инвесторы отдают деньги мошенникам с сайтов знакомств Заплатить за свидание: как инвесторы отдают деньги мошенникам с сайтов знакомств

Как понять, что вместо свиданий вам предлагают инвестиционный скам?

Forbes
Синдром Дон Жуана: какая детская травма скрыта за образом мачо Синдром Дон Жуана: какая детская травма скрыта за образом мачо

Что такое синдром Дон Жуана, как с ним живут мужчины?

Psychologies
Дух бунтарства: как Миучча Прада стала самой влиятельной женщиной в индустрии моды Дух бунтарства: как Миучча Прада стала самой влиятельной женщиной в индустрии моды

Как упрямая бунтарка создала самые успешные в индустрии моды бренды

Forbes
10 автомобилей Джеймса Бонда — от худшего к лучшему 10 автомобилей Джеймса Бонда — от худшего к лучшему

Автомобили — важная часть любого фильма о Джеймсе Бонде. А какими они были?

Maxim
«Извне», «Защищая Джейкоба» и «Дом с прислугой»: 10 лучших сериалов последних лет в жанре триллер «Извне», «Защищая Джейкоба» и «Дом с прислугой»: 10 лучших сериалов последних лет в жанре триллер

Собрали многосерийные триллеры, которые можно осилить за выходные

Правила жизни
СМС с денежным стимулированием помогли мужчинам сбросить лишний вес СМС с денежным стимулированием помогли мужчинам сбросить лишний вес

Врачи разрабатывают методы для повышения приверженности мужчин к снижению веса

N+1
Ген памяти Ген памяти

Какие альтернативные накопители предлагают на рынке хранения данных

РБК
Лучше, чем сериалы: 5 книг, которые авторы пишут по частям Лучше, чем сериалы: 5 книг, которые авторы пишут по частям

Книги, которые представляют собой часть большой серии

ТехИнсайдер
Не болей! Не болей!

5 признаков того, что твоя собака нездорова

Лиза
6 фраз, которые взрослые дети мечтают услышать от своих родителей 6 фраз, которые взрослые дети мечтают услышать от своих родителей

Шесть важных фраз, которые родители могут (и должны) сказать повзрослевшим детям

Psychologies
Открыть в приложении