Инженеры разработали наушники, способные распознавать мимику лица пользователя

N+1Наука

Наушники со встроенным локатором распознали выражение лица по форме щек

Андрей Фокин

Ke Li et al. / Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies, 2022

Американские инженеры разработали наушники, способные распознавать мимику лица пользователя. Для этого в каждый наушник встроен миниатюрный сонар, который с помощью звуковой эхолокации считывает информацию о движениях боковой области лица, после чего алгоритм машинного обучения восстанавливает выражение лица пользователя в реальном времени с высокой точностью. Эту информацию затем можно использовать, например, для создания анимированных аватаров в приложениях для общения. Статья с описанием устройства опубликована в журнале The Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies.

Технологии распознавания мимики лица человека, которые уже давно успешно используются для создания анимации персонажей в кино видеоиграх, постепенно проникают и в нашу повседневную жизнь. Например, компания NVIDIA предложила использовать распознавание выражения лица для снижения объемов данных, передаваемых по сети во время видеозвонков. Вместо того чтобы посылать все кадры, алгоритм сжатия посылает один кадр с лицом и данные о ключевых точках на нем, после чего компьютер на принимающей стороне анимирует этот кадр с помощью нейросети.

Эта и многие другие подобные технологии распознавания мимики обычно требуют, чтобы перед лицом постоянно находилась видеокамера, что может быть не всегда удобно. Для решения этой проблемы американские инженеры придумали технологию C-Face, которая с помощью встроенных в наушники двух камер и алгоритма машинного обучения способна распознавать мимику человека в реальном времени по движениям небольшой боковой области лица, попадающей в поле зрения устройства.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Виновником митохондриальной дисфункции при ожирении назвали малый G-белок Виновником митохондриальной дисфункции при ожирении назвали малый G-белок

Ученые выяснили механизм возникновения фрагментации и дисфункции митохондрий

N+1
Очищение крови Очищение крови

Рассказываем, как убрать из крови (а значит, и из всего организма) все лишнее

Лиза
Жители двух европейских поселений начали выращивать просо около 1300 года до нашей эры Жители двух европейских поселений начали выращивать просо около 1300 года до нашей эры

Когда просо начали культивировать на территории современной Центральной Германии

N+1
Почему мужчина не дарит подарки и должен ли: мнение психолога Почему мужчина не дарит подарки и должен ли: мнение психолога

Каждой девушке хочется чувствовать себя особенной в глазах мужчины

Psychologies
Психопаты, социопаты, нарциссы: в чем разница Психопаты, социопаты, нарциссы: в чем разница

Социопаты — это не серийные убийцы, которых мы привыкли видеть на экранах

Psychologies
Маньяк, который продолжил убивать в тюрьме: история «архангельского Чикатило» Сергея Шипилова Маньяк, который продолжил убивать в тюрьме: история «архангельского Чикатило» Сергея Шипилова

«Я — архангельский Чикатило», — обычно говорит он с гордой улыбкой

VOICE
Не виноватая я: 3 главные вещи, которые запрещали женщинам в СССР Не виноватая я: 3 главные вещи, которые запрещали женщинам в СССР

Три главных запрета, которые действительно портили жизнь гражданкам СССР

Правила жизни
Маркировка полезности продуктов помешала производителю ввести европейцев в заблуждение Маркировка полезности продуктов помешала производителю ввести европейцев в заблуждение

Как меняется представление покупателей о вреде или пользе продукта

N+1
Сойти за своего: как адаптироваться к жизни в другой стране Сойти за своего: как адаптироваться к жизни в другой стране

Как интегрироваться в новое общество и преодолеть культурные барьеры?

Psychologies
7 вопросов о здоровье, которые стоит задать матери 7 вопросов о здоровье, которые стоит задать матери

Предугадайте свои болезни, узнав, о чем стоит беспокоиться по материнской линии

Psychologies
8 самых опасных для жизни мест на Земле 8 самых опасных для жизни мест на Земле

Самые экстремальных места на планете, которые требуют стойкости для выживания

ТехИнсайдер
«Уэбб»: получены первые снимки «Уэбб»: получены первые снимки

Первые глубокие и чёткие снимки «Уэбба»

Наука и жизнь
5 вопросов про Ивана Грозного 5 вопросов про Ивана Грозного

Основанные на домыслах вопросы о жизни Ивана Грозного

Maxim
Александр Асмолов — Forbes: «Молодежь выходит за рамки тоталитарных матриц» Александр Асмолов — Forbes: «Молодежь выходит за рамки тоталитарных матриц»

Психолог Александр Асмолов — о грехе самосбывающихся пророчеств

Forbes
Квантовые блуждания атомов помогли искать с оракулом Квантовые блуждания атомов помогли искать с оракулом

Экспериментально реализовали квантовые блуждания нейтральных атомов стронция-88

N+1
Инсулиновая помпа восстановила структуру мозга у подростков-диабетиков Инсулиновая помпа восстановила структуру мозга у подростков-диабетиков

Как разные способы введения инсулина влияют на мозг подростков с диабетом

N+1
4 книги, которые изменят ваше отношение к себе 4 книги, которые изменят ваше отношение к себе

Подборка книг, которые помогут вам по-новому выстроить общение с собой

Psychologies
«Хотел попробовать девственность»: история маньяка Романа Бурцева, который охотился на девочек «Хотел попробовать девственность»: история маньяка Романа Бурцева, который охотился на девочек

Роман Бурцев — самый яркий маньяк 90-х

VOICE
Эффективны ли 30-дневные фитнес-челленджи: тонкости таких тренировок Эффективны ли 30-дневные фитнес-челленджи: тонкости таких тренировок

Можно ли за месяц сбросить вес и полюбить спорт?

ТехИнсайдер
Инстаграмное место: как соцсети изменили представления об идеальном пространстве Инстаграмное место: как соцсети изменили представления об идеальном пространстве

Отрывок из книги «Формула грез» — почему минимализм превратился в эстетику

Forbes
Абонемент или абонент? Отличие или различие? 10 сложных паронимов, в которых старшеклассники всегда ошибаются на ЕГЭ Абонемент или абонент? Отличие или различие? 10 сложных паронимов, в которых старшеклассники всегда ошибаются на ЕГЭ

Случаи, в которых ошибаются даже отличники по русскому языку

ТехИнсайдер
«Мы не говорим, что когда-то будет лучше, мы делаем, чтобы каждый год становилось лучше» «Мы не говорим, что когда-то будет лучше, мы делаем, чтобы каждый год становилось лучше»

Заместитель генерального директора РЖД — о перспективах развития железных дорог

Эксперт
Не то, чем кажется: развеиваем 4 популярных мифа о российской экокосметике Не то, чем кажется: развеиваем 4 популярных мифа о российской экокосметике

Как выбрать по-настоящему безопасный и эффективный экопродукт

VOICE
Потепление угрожает таежным лесам — самой крупной экосистеме России Потепление угрожает таежным лесам — самой крупной экосистеме России

Как потепление климата сказывается на таежных лицах?

ТехИнсайдер
Формула долголетия: 5 книг, которые помогут вам привить полезные привычки Формула долголетия: 5 книг, которые помогут вам привить полезные привычки

Книги, которые помогут сформировать привычки, ведущие к счастью и богатству

ТехИнсайдер
Нужно ли говорить ребенку, что он приемный: личный опыт читательницы и комментарий психолога Нужно ли говорить ребенку, что он приемный: личный опыт читательницы и комментарий психолога

Правильно ли беречь тайну усыновления от самого ребенка?

Psychologies
Снимите это немедленно Снимите это немедленно

В каких случаях очки могут тебе навредить

Лиза
Какие животные страдают от экстремальных погодных условий, а какие — даже не замечают Какие животные страдают от экстремальных погодных условий, а какие — даже не замечают

При экстремальных погодных условиях страдают мелкие, короткоживущие виды

ТехИнсайдер
Удивительный паразит, который делает хозяина невероятно привлекательным и сексуальным Удивительный паразит, который делает хозяина невероятно привлекательным и сексуальным

Toxoplasma gondii потенциально манипулирует внешностью своего хозяина

ТехИнсайдер
Призрачный успех: почему российскому бизнесу сложно покорить китайский рынок Призрачный успех: почему российскому бизнесу сложно покорить китайский рынок

Как оценивать потенциально новый рынок Китая?

Forbes
Открыть в приложении