Инженеры разработали наушники, способные распознавать мимику лица пользователя

N+1Наука

Наушники со встроенным локатором распознали выражение лица по форме щек

Андрей Фокин

Ke Li et al. / Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies, 2022

Американские инженеры разработали наушники, способные распознавать мимику лица пользователя. Для этого в каждый наушник встроен миниатюрный сонар, который с помощью звуковой эхолокации считывает информацию о движениях боковой области лица, после чего алгоритм машинного обучения восстанавливает выражение лица пользователя в реальном времени с высокой точностью. Эту информацию затем можно использовать, например, для создания анимированных аватаров в приложениях для общения. Статья с описанием устройства опубликована в журнале The Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies.

Технологии распознавания мимики лица человека, которые уже давно успешно используются для создания анимации персонажей в кино видеоиграх, постепенно проникают и в нашу повседневную жизнь. Например, компания NVIDIA предложила использовать распознавание выражения лица для снижения объемов данных, передаваемых по сети во время видеозвонков. Вместо того чтобы посылать все кадры, алгоритм сжатия посылает один кадр с лицом и данные о ключевых точках на нем, после чего компьютер на принимающей стороне анимирует этот кадр с помощью нейросети.

Эта и многие другие подобные технологии распознавания мимики обычно требуют, чтобы перед лицом постоянно находилась видеокамера, что может быть не всегда удобно. Для решения этой проблемы американские инженеры придумали технологию C-Face, которая с помощью встроенных в наушники двух камер и алгоритма машинного обучения способна распознавать мимику человека в реальном времени по движениям небольшой боковой области лица, попадающей в поле зрения устройства.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

В древнем левантийском поселении изготавливали пурпур на протяжении 500 лет В древнем левантийском поселении изготавливали пурпур на протяжении 500 лет

В Тель-Шикмоне примерно 500 лет находился крупный центр по производству пурпура

N+1
Ядовитые реки, отравленные моря Ядовитые реки, отравленные моря

Катастрофы, угрожающие живым организмам, происходят довольно часто

Наука и жизнь
Гадюка попыталась проглотить зайчонка в десять раз тяжелее себя Гадюка попыталась проглотить зайчонка в десять раз тяжелее себя

Некоторые змеи способны целиком проглатывать добычу, которая очень велика

N+1
Пора валить спать Пора валить спать

«Песочный человек»: Нил Гейман о лучшем способе эскапизма

Weekend
Почему нам хочется есть: как нейрофизиология объясняет переедание и импульсивные перекусы Почему нам хочется есть: как нейрофизиология объясняет переедание и импульсивные перекусы

Каков ключ к решению проблемы переедания и импульсивных перекусов?

ТехИнсайдер
Как на самом деле действуют отбеливающие пасты и чем могут быть опасны Как на самом деле действуют отбеливающие пасты и чем могут быть опасны

Советуют ли стоматологи использовать отбеливающие пасты?

Лиза
Донья Пас: катастрофа, унесшая больше жизней, чем гибель Титаника Донья Пас: катастрофа, унесшая больше жизней, чем гибель Титаника

Паром Донья Пас должен был прибыть в Манилу в четыре часа утра

VOICE
Катерина Сильванова, Елена Малисова: «О чем молчит Ласточка». Продолжение бестселлера «Лето в пионерском галстуке» Катерина Сильванова, Елена Малисова: «О чем молчит Ласточка». Продолжение бестселлера «Лето в пионерском галстуке»

Глава из книги «О чем молчит Ласточка» — о рефлексии юношеской любви

СНОБ
Бравые наёмники моды Бравые наёмники моды

Самый яркий и необычный костюм эпохи Возрождения

Дилетант
Платят немного, катаешься всю ночь: как работают люди, которые по ночам моют и перегоняют каршеринг Платят немного, катаешься всю ночь: как работают люди, которые по ночам моют и перегоняют каршеринг

Cтоит ли этот заработок бессонной ночи и большой материальной ответственности

VC.RU
Резинки-пружинки и другие небезопасные аксессуары, которые портят твои волосы Резинки-пружинки и другие небезопасные аксессуары, которые портят твои волосы

Сегодня мы расскажем тебе, какие аксессуары и как могут навредить твоим локонам

VOICE
«Пока не сыграл в ящик»: как составить список самых важных дел «Пока не сыграл в ящик»: как составить список самых важных дел

Как составить bucket list и при этом избежать ошибок?

Psychologies
В России разрешат разбирать самолеты, чтобы починить другие. Станет ли опаснее летать? В России разрешат разбирать самолеты, чтобы починить другие. Станет ли опаснее летать?

Российские авиакомпании начали разбирать самолеты на запчасти

Maxim
Как переживал начало Второй мировой войны ювелирный дом Cartier Как переживал начало Второй мировой войны ювелирный дом Cartier

Отрывок из книги об одном из самых известных ювелирных домов в мире

СНОБ
«Нам с мужем ребенок в путешествиях не мешает» «Нам с мужем ребенок в путешествиях не мешает»

Рената Пиотровски провела с семьей отпуск в солнечном Дубае

OK!
Откуда вырос арифметический корень? Откуда вырос арифметический корень?

Попробуем разобраться в запутанной истории появления на свет знака радикала

Наука и жизнь
Что крадут наши эмоции: 7 фактов Что крадут наши эмоции: 7 фактов

Факты о негативном влиянии эмоций на нашу жизнь

Psychologies
Маргарита Терехова. Убегающая в темноту Маргарита Терехова. Убегающая в темноту

Сноб размышляет о судьбе актрисы Маргариты Тереховой

СНОБ
Древнейшие земледельцы сформировались из трех предковых популяций Древнейшие земледельцы сформировались из трех предковых популяций

Ученые разобрались в происхождении населения эпохи докерамического неолита

N+1
9 причин, почему современные автомобили хуже тех, что выпускали в 90-е и 2000-е 9 причин, почему современные автомобили хуже тех, что выпускали в 90-е и 2000-е

За плюсы современных машин мы заплатили сторицей

Maxim
Рассказать о старости Рассказать о старости

Нужно ли рассказывать детям и подросткам о старости?

СНОБ
М или Ж? Как раз и навсегда запомнить род слова М или Ж? Как раз и навсегда запомнить род слова

Тюль — мужской род или женский?

ТехИнсайдер
Врачи назвали 5 причин, из-за которых мы просыпаемся ночью и рано утром Врачи назвали 5 причин, из-за которых мы просыпаемся ночью и рано утром

Замечаете, что ни с того ни с сего просыпаетесь среди ночи?

ТехИнсайдер
Какие привычные продукты богаты железом: рацион для укрепления иммунитета Какие привычные продукты богаты железом: рацион для укрепления иммунитета

Простые продукты, в которых много железа

ТехИнсайдер
От горячего шоколада до спелой сливы: 7 классных вариантов маникюра для подготовки к осени От горячего шоколада до спелой сливы: 7 классных вариантов маникюра для подготовки к осени

Подборка нейл-дизайнов в самых трендовых оттенках осени

VOICE
От чего стоит отказаться при повышенном сахаре в крови: 9 опасных продуктов, о которых должен знать каждый От чего стоит отказаться при повышенном сахаре в крови: 9 опасных продуктов, о которых должен знать каждый

От эти продуктов лучше отказаться — на время или навсегда

ТехИнсайдер
Платья непрямого действия Платья непрямого действия

Путеводитель по сюрреалистическим мирам Эльзы Скьяпарелли

Weekend
Почему во время путча по телевизору показывали «Лебединое озеро» Почему во время путча по телевизору показывали «Лебединое озеро»

Как знаменитый балет стал символом путча и государственного переворота

Maxim
Забытый король вестернов Том Микс: ковбой с простреленным горлом и легенда Голливуда Забытый король вестернов Том Микс: ковбой с простреленным горлом и легенда Голливуда

Том Микс — реальный ковбой со сломанным носом и простреленным горлом

Maxim
История Бритни Спирс и 3 заблуждения о недееспособности и опекунстве История Бритни Спирс и 3 заблуждения о недееспособности и опекунстве

Профессор Элин Сакс — о проблеме опеки над людьми с ментальными особенностями

Psychologies
Открыть в приложении