Инженеры разработали наушники, способные распознавать мимику лица пользователя

N+1Наука

Наушники со встроенным локатором распознали выражение лица по форме щек

Андрей Фокин

Ke Li et al. / Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies, 2022

Американские инженеры разработали наушники, способные распознавать мимику лица пользователя. Для этого в каждый наушник встроен миниатюрный сонар, который с помощью звуковой эхолокации считывает информацию о движениях боковой области лица, после чего алгоритм машинного обучения восстанавливает выражение лица пользователя в реальном времени с высокой точностью. Эту информацию затем можно использовать, например, для создания анимированных аватаров в приложениях для общения. Статья с описанием устройства опубликована в журнале The Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies.

Технологии распознавания мимики лица человека, которые уже давно успешно используются для создания анимации персонажей в кино видеоиграх, постепенно проникают и в нашу повседневную жизнь. Например, компания NVIDIA предложила использовать распознавание выражения лица для снижения объемов данных, передаваемых по сети во время видеозвонков. Вместо того чтобы посылать все кадры, алгоритм сжатия посылает один кадр с лицом и данные о ключевых точках на нем, после чего компьютер на принимающей стороне анимирует этот кадр с помощью нейросети.

Эта и многие другие подобные технологии распознавания мимики обычно требуют, чтобы перед лицом постоянно находилась видеокамера, что может быть не всегда удобно. Для решения этой проблемы американские инженеры придумали технологию C-Face, которая с помощью встроенных в наушники двух камер и алгоритма машинного обучения способна распознавать мимику человека в реальном времени по движениям небольшой боковой области лица, попадающей в поле зрения устройства.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Американские врачи выполнили первую в мире пересадку мочевого пузыря Американские врачи выполнили первую в мире пересадку мочевого пузыря

Хирурги впервые в мире пересадили пациенту мочевой пузырь от мертвого донора

N+1
«Лингвисты, пришедшие с холода». История структурной лингвистики в СССР «Лингвисты, пришедшие с холода». История структурной лингвистики в СССР

Лингвистические задачи, придуманным Андреем Анатольевичем Зализняком

N+1
В центре нашей Галактики обнаружены загадочные обьекты. Они могут раскрыть главную тайну Вселенной В центре нашей Галактики обнаружены загадочные обьекты. Они могут раскрыть главную тайну Вселенной

Новый способ пролить свет на загадку темной материи

Inc.
Что такое коленвал и почему он может сломаться Что такое коленвал и почему он может сломаться

Что делает коленвал таким незаменимым и как обеспечить ему активное долголетие?

РБК
План Б План Б

Как пережить несчастье, собраться с силами и снова ощутить радость жизни

kiozk originals
Мифы и суеверия: почему информатика теперь — это необходимая наука об окружающем мире Мифы и суеверия: почему информатика теперь — это необходимая наука об окружающем мире

Почему в современном мире необходимо пересмотреть отношение к информатике

Forbes
«А судьи кто?»: как искусственный интеллект помогает человеку в суде «А судьи кто?»: как искусственный интеллект помогает человеку в суде

Способны ли роботы заменить судью и насколько это этично?

ТехИнсайдер
«Я почитала аффирмации и не выздоровела»: почему не стоит слишком увлекаться психосоматикой «Я почитала аффирмации и не выздоровела»: почему не стоит слишком увлекаться психосоматикой

Роль психосоматики в последнее время явно преувеличена, и вот почему

Psychologies
Как мы дошли до спотифая? Краткая история звукозаписи Как мы дошли до спотифая? Краткая история звукозаписи

Звучащая речь из 19 века преодолела свой путь в 21 век силами не одного ученого

ТехИнсайдер
Почему тарифы ЖКХ постоянно растут? Почему тарифы ЖКХ постоянно растут?

Куда жаловаться, если кажется, что коммунальщики обнаглели в своих аппетитах

Maxim
Не только для подогрева еды Не только для подогрева еды

10 неочевидных способов использования микроволновки в быту

Лиза
«Еврейка, которая шпионила против фашистов»: отрывок из биографии Урсулы Кучински «Еврейка, которая шпионила против фашистов»: отрывок из биографии Урсулы Кучински

Отрывок из книги «Агент Соня. Любовница, мать, шпионка, боец»

Forbes
Зависимость и независимость: как найти баланс? Зависимость и независимость: как найти баланс?

Взрослая личность вполне способна развить в себе недостающие качества

Psychologies
Как подключить ноутбук к монитору: провода необязательны Как подключить ноутбук к монитору: провода необязательны

Как легко подключить лэптоп к обычному монитору?

CHIP
Гид по метаверсу от Покраса Гид по метаверсу от Покраса

Покрас Лампас — о метаверсе, метаценностях и метамодернизме

Собака.ru
Вороньи уроки Вороньи уроки

Когда кедру было 35 лет, в его кроне свила гнездо серая ворона

Наука и жизнь
В пустынном солончаке чудом обнаружили древние В пустынном солончаке чудом обнаружили древние

Археологи наткнулись на таинственные «призрачные следы» на солончаках пустыни

ТехИнсайдер
Еда от дьявола: какие продукты было запрещено употреблять в пищу на Руси Еда от дьявола: какие продукты было запрещено употреблять в пищу на Руси

Почему некоторые привычные нам продукты запрещались на Руси волею правителей

ТехИнсайдер
Как правильно парковаться задним ходом: пошаговая инструкция Как правильно парковаться задним ходом: пошаговая инструкция

Парковка задним ходом? Только без паники! Не так все страшно

РБК
«Слежка за бывшими приводит к зависимости»: как заняться своей жизнью «Слежка за бывшими приводит к зависимости»: как заняться своей жизнью

Как появляется зависимость от слежки за бывшим партнером?

Psychologies
Зачем изучать искусство: 5 причин Зачем изучать искусство: 5 причин

Как искусство развивает наш кругозор и снимает тревожность?

Psychologies
Как развить самодисциплину всего за 5 минут в день Как развить самодисциплину всего за 5 минут в день

Как пустяковые полезные привычки могут привести тебя к большим свершениям

Maxim
Глобальное изменение климата сыграло на руку большинству инфекционных заболеваний Глобальное изменение климата сыграло на руку большинству инфекционных заболеваний

Глобальное изменение климата повышает распространенность инфекций

N+1
Балканские скотоводы эпохи неолита поохотились на косуль Балканские скотоводы эпохи неолита поохотились на косуль

Палеозоологи исследовали кости животных с шести древних поселений

N+1
Искренняя книга о жизни и надежде Александра Гулько «Райгород» Искренняя книга о жизни и надежде Александра Гулько «Райгород»

История нескольких поколений семьи Лейба Гройсмана, гениального предпринимателя

СНОБ
Японский «кроссворд» Даллеса Японский «кроссворд» Даллеса

Вторая мировая война завершилась на борту американского линкора «Миссури»

Дилетант
Что такое настоящая любовь к женщине: смешная и мудрая цитата Романа Карцева Что такое настоящая любовь к женщине: смешная и мудрая цитата Романа Карцева

Монологи Романа Карцева смешат нас до сих пор

VOICE
Давай голосом. Вспоминаем историю Siri — голосового помощника, который опередил Google, продался Apple и изменил жизни миллионов Давай голосом. Вспоминаем историю Siri — голосового помощника, который опередил Google, продался Apple и изменил жизни миллионов

Отрывок из книги «Harvard Business Review: 10 лучших статей»

Inc.
Позитивный пиар при небольших инвестициях: почему бренды поддерживают женский спорт Позитивный пиар при небольших инвестициях: почему бренды поддерживают женский спорт

Женский спорт созрел для серьезной монетизации

Forbes
Больно с детства. Что с этим делать сейчас? Больно с детства. Что с этим делать сейчас?

Что делать, если эмоциональный взрыв или конфликт случились в раннем детстве?

Psychologies
Открыть в приложении