Инженеры разработали наушники, способные распознавать мимику лица пользователя

N+1Наука

Наушники со встроенным локатором распознали выражение лица по форме щек

Андрей Фокин

Ke Li et al. / Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies, 2022

Американские инженеры разработали наушники, способные распознавать мимику лица пользователя. Для этого в каждый наушник встроен миниатюрный сонар, который с помощью звуковой эхолокации считывает информацию о движениях боковой области лица, после чего алгоритм машинного обучения восстанавливает выражение лица пользователя в реальном времени с высокой точностью. Эту информацию затем можно использовать, например, для создания анимированных аватаров в приложениях для общения. Статья с описанием устройства опубликована в журнале The Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies.

Технологии распознавания мимики лица человека, которые уже давно успешно используются для создания анимации персонажей в кино видеоиграх, постепенно проникают и в нашу повседневную жизнь. Например, компания NVIDIA предложила использовать распознавание выражения лица для снижения объемов данных, передаваемых по сети во время видеозвонков. Вместо того чтобы посылать все кадры, алгоритм сжатия посылает один кадр с лицом и данные о ключевых точках на нем, после чего компьютер на принимающей стороне анимирует этот кадр с помощью нейросети.

Эта и многие другие подобные технологии распознавания мимики обычно требуют, чтобы перед лицом постоянно находилась видеокамера, что может быть не всегда удобно. Для решения этой проблемы американские инженеры придумали технологию C-Face, которая с помощью встроенных в наушники двух камер и алгоритма машинного обучения способна распознавать мимику человека в реальном времени по движениям небольшой боковой области лица, попадающей в поле зрения устройства.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

На египетской картине нашли библейский синий На египетской картине нашли библейский синий

Из чего древние египтяне делали редкую краску — библейский синий

N+1
Города вечной жизни: 5 мест в мире, где введен запрет на смерть Города вечной жизни: 5 мест в мире, где введен запрет на смерть

Местных жителей этих городов смерть не застанет врасплох

Maxim
Астрономы заметили в космосе таинственную идеальную сферу Астрономы заметили в космосе таинственную идеальную сферу

Объект Телиос: совершенная сфера неизвестного происхождения

ТехИнсайдер
В пробах, взятых с астероида Рюгу, найдены особые зерна — они древнее нашего Солнца В пробах, взятых с астероида Рюгу, найдены особые зерна — они древнее нашего Солнца

Рюгу похож на класс метеоритов, известных как углеродистые хондриты типа Ивуна

ТехИнсайдер
Что такое калланетика и помогает ли она похудеть: 9 упражнений Что такое калланетика и помогает ли она похудеть: 9 упражнений

Эффективный комплекс упражнений для укрепления мышц, которые можно делать дома

РБК
Как узнать, подойдет ли игра на ПК? Два простых метода Как узнать, подойдет ли игра на ПК? Два простых метода

Способы, которые помогут понять, подходит ли игра по системным требованиям

CHIP
Перезапустить либидо Перезапустить либидо

Что можно предпринять, если в постели уже очень давно ничего не происходит?

Psychologies
«Он исчез, не попрощавшись»: как уберечь себя от такого сценария «Он исчез, не попрощавшись»: как уберечь себя от такого сценария

Почему мужчина неожиданно перестал общаться и просто «пропал с радаров»?

Psychologies
«16 эссе об истории искусства». Как описывать и анализировать предметы искусства и культуры «16 эссе об истории искусства». Как описывать и анализировать предметы искусства и культуры

Глава из «16 эссе об истории искусства» — как маски стали музейными экспонатами

N+1
Почему так тяжело смириться с потерей домашних животных: 5 фактов Почему так тяжело смириться с потерей домашних животных: 5 фактов

Век питомцев гораздо короче человеческого, и терять их невыносимо горько

Psychologies
Как отрастить ресницы — советы экспертов и правила ухода Как отрастить ресницы — советы экспертов и правила ухода

Сделать ресницы длиннее помогут эти процедуры

РБК
Как оптимизировать Windows 11 и Windows 10 для игр: компьютер будет «летать»! Как оптимизировать Windows 11 и Windows 10 для игр: компьютер будет «летать»!

Мало купить мощный компьютер, его нужно еще и оптимизировать

ТехИнсайдер
Закончил холодную войну и развалил СССР: с чем вошел в историю Михаил Горбачев Закончил холодную войну и развалил СССР: с чем вошел в историю Михаил Горбачев

Первое, с чем покончил Михаил Сергеевич Горбачев — гонки на катафалках

Maxim
Слизь так важна для жизни, что разные виды самостоятельно получали ее в ходе эволюции снова и снова Слизь так важна для жизни, что разные виды самостоятельно получали ее в ходе эволюции снова и снова

Слизь появлялась на мировом эволюционном древе ни один и не два раза

ТехИнсайдер
Портрет пейзажа Портрет пейзажа

«Дети спящего великана»: один из лучших фильмов фестиваля Doker

Weekend
Синдром одомашнивания: отрывок из книги «Парадокс добродетели» Ричарда Рэнгема Синдром одомашнивания: отрывок из книги «Парадокс добродетели» Ричарда Рэнгема

Почему людям свойственны одновременно доброта и жестокость?

СНОБ
Соберись, тряпка: как создать успешный и социально значимый бизнес на ненужных вещах Соберись, тряпка: как создать успешный и социально значимый бизнес на ненужных вещах

Из старой одежды можно сделать не только ветошь, но и синтетическое топливо

Forbes
Вместо сына: зачем афганским девочкам дают мужские имена Вместо сына: зачем афганским девочкам дают мужские имена

Бача-пош: что это за практика и как она влияет на афганок?

Forbes
Маргарита Терехова. Убегающая в темноту Маргарита Терехова. Убегающая в темноту

Сноб размышляет о судьбе актрисы Маргариты Тереховой

СНОБ
7 способов повысить интеллект ребенка 7 способов повысить интеллект ребенка

Несколько простых советов, которые помогут улучшить работу детского мозга

Лиза
Зачем бытовая техника следит за нами и чем это может быть опасно Зачем бытовая техника следит за нами и чем это может быть опасно

Как хакеры могут испортить тебе жизнь одним нажатием кнопки

Maxim
Археологи нашли на новгородском Немецком дворе европейскую посуду и обувь Археологи нашли на новгородском Немецком дворе европейскую посуду и обувь

Руководитель экспедиции рассказал о находках, сделанных в слоях XIII–XIV веков

N+1
Змеиный характер Змеиный характер

Стопе повезло: она остановилась в каких-то двадцати сантиметрах от головы змеи

Наука и жизнь
Почему с синдромами самозванца, перфекциониста и другими «спецэффектами» не надо бороться? Почему с синдромами самозванца, перфекциониста и другими «спецэффектами» не надо бороться?

А что, если мы научимся использовать синдром самозванца себе во благо?

Psychologies
Как на самом деле действуют отбеливающие пасты и чем могут быть опасны Как на самом деле действуют отбеливающие пасты и чем могут быть опасны

Советуют ли стоматологи использовать отбеливающие пасты?

Лиза
Кто сильнее – карбон или титан? Команда гиков сравнила реакцию обоих материалов на сжатие Кто сильнее – карбон или титан? Команда гиков сравнила реакцию обоих материалов на сжатие

Парни решили проверить, насколько суперматериалы действительно «супер»

ТехИнсайдер
«Мы знаем, чего хотят мамы» «Мы знаем, чего хотят мамы»

Алиса Лобанова определенно живет в Стране чудес

OK!
«Джеймс Уэбб» обнаружил кандидата в древнейшую известную галактику «Джеймс Уэбб» обнаружил кандидата в древнейшую известную галактику

Астрономы обнаружили очередного кандидата в древнейшую галактику

N+1
Куриные кости и раковины улиток помогли уточнить время разрушения Скифополя Куриные кости и раковины улиток помогли уточнить время разрушения Скифополя

Археологи проанализировали находки, сделанные во время раскопок Телль-Ицтаба

N+1
Бабочки умеют мигрировать не хуже птиц: удивительное открытие Бабочки умеют мигрировать не хуже птиц: удивительное открытие

Как насекомое может сохранять совершенно прямую траекторию полёта?

ТехИнсайдер
Открыть в приложении