Инженеры разработали наушники, способные распознавать мимику лица пользователя

N+1Наука

Наушники со встроенным локатором распознали выражение лица по форме щек

Андрей Фокин

Ke Li et al. / Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies, 2022

Американские инженеры разработали наушники, способные распознавать мимику лица пользователя. Для этого в каждый наушник встроен миниатюрный сонар, который с помощью звуковой эхолокации считывает информацию о движениях боковой области лица, после чего алгоритм машинного обучения восстанавливает выражение лица пользователя в реальном времени с высокой точностью. Эту информацию затем можно использовать, например, для создания анимированных аватаров в приложениях для общения. Статья с описанием устройства опубликована в журнале The Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies.

Технологии распознавания мимики лица человека, которые уже давно успешно используются для создания анимации персонажей в кино видеоиграх, постепенно проникают и в нашу повседневную жизнь. Например, компания NVIDIA предложила использовать распознавание выражения лица для снижения объемов данных, передаваемых по сети во время видеозвонков. Вместо того чтобы посылать все кадры, алгоритм сжатия посылает один кадр с лицом и данные о ключевых точках на нем, после чего компьютер на принимающей стороне анимирует этот кадр с помощью нейросети.

Эта и многие другие подобные технологии распознавания мимики обычно требуют, чтобы перед лицом постоянно находилась видеокамера, что может быть не всегда удобно. Для решения этой проблемы американские инженеры придумали технологию C-Face, которая с помощью встроенных в наушники двух камер и алгоритма машинного обучения способна распознавать мимику человека в реальном времени по движениям небольшой боковой области лица, попадающей в поле зрения устройства.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Астрономы впервые достоверно нашли экзопланету с кратной полярной орбитой Астрономы впервые достоверно нашли экзопланету с кратной полярной орбитой

Ученые впервые подтвердили существование экзопланеты с кратной полярной орбитой

N+1
Можно ли создать идеального бота: разрушаем главные заблуждения о голосовых помощниках Можно ли создать идеального бота: разрушаем главные заблуждения о голосовых помощниках

Разбираемся в мифах и реальных фактах о голосовых помощниках

ТехИнсайдер
Как мозг формирует привычки и почему от них сложно избавиться Как мозг формирует привычки и почему от них сложно избавиться

Мозг и привычки: причем тут дофамин и ошибки в предсказаниях?

ТехИнсайдер
Психиатр и специалист по питанию из Гарварда назвала 6 продуктов, которые сохранят мозг «молодым и здоровым» Психиатр и специалист по питанию из Гарварда назвала 6 продуктов, которые сохранят мозг «молодым и здоровым»

Чем витамины группы В полезны для мозга и в каких продуктах они содержатся

Inc.
7 фруктов, которые нельзя хранить в холодильнике: мнение шеф-повара 7 фруктов, которые нельзя хранить в холодильнике: мнение шеф-повара

Каким фруктам не место в холодильнике

VOICE
Что делать с кабачками? 3 необычных рецепта, которые спасут, если тебе опять всучили кабачок Что делать с кабачками? 3 необычных рецепта, которые спасут, если тебе опять всучили кабачок

Что делать, если у вас слишком много кабачков?

VOICE
Авангард Леонтьев. Счастливчик Авангард Леонтьев. Счастливчик

«Только сейчас начал понимать, как мне везло в жизни»

Коллекция. Караван историй
«Советская Атлантида»: как сохраняют память об ушедших под воду городах «Советская Атлантида»: как сохраняют память об ушедших под воду городах

Как потомки жителей затопленных городов и деревень восстанавливают память о них

Forbes
Никогда больше: как Германия формирует нетерпимость к преступлениям прошлого Никогда больше: как Германия формирует нетерпимость к преступлениям прошлого

Наследие катастроф XX века заставляет Европу пересматривать отношение к истории

Forbes
В каких фруктах и ягодах больше всего белка В каких фруктах и ягодах больше всего белка

Что поможет тебе не только восполнить дефицит витаминов, но и набрать массу

Maxim
От Голды Меир до Индиры Ганди: как женщины становились премьер-министрами От Голды Меир до Индиры Ганди: как женщины становились премьер-министрами

Женщины, которые, несмотря на трудности, реализовали свои политические амбиции

Forbes
В детстве вас не замечали: 7 последствий жизни в токсичной семье В детстве вас не замечали: 7 последствий жизни в токсичной семье

Какие «хвосты» из детства в токсичной семье могут отравлять взрослую жизнь?

Psychologies
О чем говорит поведение мужчин после ссор? Мнение психолога О чем говорит поведение мужчин после ссор? Мнение психолога

Узнай новое о своем любимом по тому, как он ведет себя после ссоры

VOICE
Ученые: некоторые виды стресса могут улучшить работу мозга и снизить риск психических заболеваний Ученые: некоторые виды стресса могут улучшить работу мозга и снизить риск психических заболеваний

Стресс может быть полезен для мозга и вашего будущего

Inc.
Рипофобия: когда стремление к чистоте превращается в одержимость Рипофобия: когда стремление к чистоте превращается в одержимость

Что такое рипофобия и как с ней справиться?

Psychologies
«Вещная жизнь: материальность позднего социализма». «Вещная жизнь: материальность позднего социализма».

Отрывок из книги «Вещная жизнь» — о том, как железо в СССР было связано с силой

N+1
3 главные загадки Древнего Египта, которые ученые до сих пор не могут раскрыть 3 главные загадки Древнего Египта, которые ученые до сих пор не могут раскрыть

Мы до сих пор очень мало знаем о загадочных египетских пирамидах

ТехИнсайдер
3 привычки, которые помогут партнерам стать ближе 3 привычки, которые помогут партнерам стать ближе

Инструкция, которая поможет вам укрепить отношения

Psychologies
Это просто белый яд: разоблачаем самые распространённые мифы о соли Это просто белый яд: разоблачаем самые распространённые мифы о соли

Эту самую простую приправу обвиняют во многих грехах

VOICE
Какие из российских яблок самые вкусные, надо ли чистить яблоки и еще 10 вопросов о главной фруктовой скрепе Какие из российских яблок самые вкусные, надо ли чистить яблоки и еще 10 вопросов о главной фруктовой скрепе

Такой привычный с детства фрукт, как яблоко, вопросов вроде бы не вызывает

Maxim

Страхи в постели часто вообще никак не связаны с реальным положением дел

VOICE
Наталья Подольская и Владимир Пресняков. «Так и живем: один подумал — другой сказал» Наталья Подольская и Владимир Пресняков. «Так и живем: один подумал — другой сказал»

Интервью с Натальей Подольской о ее детях, программах и песнях

Коллекция. Караван историй
Кофейный пояс, пыльный котел, банановая республика: расшифровываем 7 географических метафор Кофейный пояс, пыльный котел, банановая республика: расшифровываем 7 географических метафор

Что скрывается за звучными названиями мест, маршрутов и событий

Вокруг света
Одна вокруг света: путешествие через вулкан Тунупа и розовый фламинго, дитя заката Одна вокруг света: путешествие через вулкан Тунупа и розовый фламинго, дитя заката

История о трудной дороге и бескрайних залежах соли, в которых отражается небо

Forbes
Как сохранить желание: интервью с сексологом Как сохранить желание: интервью с сексологом

Можно ли сохранять сексуальный аппетит на протяжении долгого времени?

Psychologies
7 вопросов о здоровье, которые стоит задать матери 7 вопросов о здоровье, которые стоит задать матери

Предугадайте свои болезни, узнав, о чем стоит беспокоиться по материнской линии

Psychologies
Дайте «Оскар» этой богине! Дайте «Оскар» этой богине!

В мире более 70 пород кошек, и выделить самых красивых очень сложно

Лиза
Еда от дьявола: какие продукты было запрещено употреблять в пищу на Руси Еда от дьявола: какие продукты было запрещено употреблять в пищу на Руси

Почему некоторые привычные нам продукты запрещались на Руси волею правителей

ТехИнсайдер
Как помочь своей психике после выматывающего рабочего дня: 5 эффективных способов Как помочь своей психике после выматывающего рабочего дня: 5 эффективных способов

Как быстро и эффективно восстановить психическое равновесие в конце дня

Psychologies
Елена Долгопят: «Хроники забытых сновидений». Дневник кинозрителя Елена Долгопят: «Хроники забытых сновидений». Дневник кинозрителя

Отрывок из книги «Хроники забытых сновидений», где сны мешаются с явью

СНОБ
Открыть в приложении