Инженеры разработали наушники, способные распознавать мимику лица пользователя

N+1Наука

Наушники со встроенным локатором распознали выражение лица по форме щек

Андрей Фокин

Ke Li et al. / Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies, 2022

Американские инженеры разработали наушники, способные распознавать мимику лица пользователя. Для этого в каждый наушник встроен миниатюрный сонар, который с помощью звуковой эхолокации считывает информацию о движениях боковой области лица, после чего алгоритм машинного обучения восстанавливает выражение лица пользователя в реальном времени с высокой точностью. Эту информацию затем можно использовать, например, для создания анимированных аватаров в приложениях для общения. Статья с описанием устройства опубликована в журнале The Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies.

Технологии распознавания мимики лица человека, которые уже давно успешно используются для создания анимации персонажей в кино видеоиграх, постепенно проникают и в нашу повседневную жизнь. Например, компания NVIDIA предложила использовать распознавание выражения лица для снижения объемов данных, передаваемых по сети во время видеозвонков. Вместо того чтобы посылать все кадры, алгоритм сжатия посылает один кадр с лицом и данные о ключевых точках на нем, после чего компьютер на принимающей стороне анимирует этот кадр с помощью нейросети.

Эта и многие другие подобные технологии распознавания мимики обычно требуют, чтобы перед лицом постоянно находилась видеокамера, что может быть не всегда удобно. Для решения этой проблемы американские инженеры придумали технологию C-Face, которая с помощью встроенных в наушники двух камер и алгоритма машинного обучения способна распознавать мимику человека в реальном времени по движениям небольшой боковой области лица, попадающей в поле зрения устройства.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Стремечко назвали идеальной костью для палеогеномного исследования Стремечко назвали идеальной костью для палеогеномного исследования

Почему при анализе древней ДНК нужно отдавать предпочтение стремечку

N+1
Формируем полезные привычки: 3 лайфхака Формируем полезные привычки: 3 лайфхака

Как без лишних усилий развить и закрепить желаемое поведение

Psychologies
На римском памятнике впервые нашли артефакт из ископаемого трилобита На римском памятнике впервые нашли артефакт из ископаемого трилобита

Как архаичные люди могли использовать окаменелости трилобитов?

N+1
Есть ли у растений нервы? Есть ли у растений нервы?

Нервов у растений нет, во всяком случае, в том виде, в каком они есть у животных

Наука и жизнь
Кетчуп и зубная щетка: неожиданные вещи, которые изобрели китайцы Кетчуп и зубная щетка: неожиданные вещи, которые изобрели китайцы

На самом деле китайцы изобрели множество привычных нам вещей

ТехИнсайдер
Ангел смерти: история медсестры Дженин Джонс, которая убивала детей, чтобы ее похвалили Ангел смерти: история медсестры Дженин Джонс, которая убивала детей, чтобы ее похвалили

С детьми происходило странное: одни переставали дышать, другие конвульсировали

VOICE
Грибы-скороспелки Грибы-скороспелки

Среди грибов встречаются виды, которые быстро растут и так же быстро исчезают

Наука и жизнь
Чилийские игнимбриты объяснили поведение супервулканов перед извержениями Чилийские игнимбриты объяснили поведение супервулканов перед извержениями

Магматические очаги будущих суперизвержений росли всего пару тысяч лет

N+1
Эффективные способы укрепить ногти в домашних условиях Эффективные способы укрепить ногти в домашних условиях

На красоту и здоровье ногтей влияет множество факторов

VOICE
Развенчиваем мифы народной медицины Развенчиваем мифы народной медицины

Народная медицина: польза или вред?

Лиза
Мягкая сила. Как управлять бизнесом в новой реальности: правила первого зампреда правления Росбанка Перизат Шайхиной Мягкая сила. Как управлять бизнесом в новой реальности: правила первого зампреда правления Росбанка Перизат Шайхиной

Как замотивировать сотрудников, не прибегая к авторитарным мерам

Правила жизни
Правила самогонщиков: почему медь вкуснее нержавейки и как отсечь хвосты на глаз Правила самогонщиков: почему медь вкуснее нержавейки и как отсечь хвосты на глаз

Рано или поздно любой благородный муж приходит к мысли о самогоноварении

Maxim
Сосредоточьтесь на чем-то одном: как многозадачность вредит нашему здоровью и отношениям Сосредоточьтесь на чем-то одном: как многозадачность вредит нашему здоровью и отношениям

Многозадачность на самом деле снижает нашу общую продуктивность

Psychologies
«Буллинг под видом заботы»: когда гиперопека в семье превращается в травлю ребенка «Буллинг под видом заботы»: когда гиперопека в семье превращается в травлю ребенка

Стать агрессорами могут и любящие родители

Psychologies
Топ-10 лучших вариантов осеннего маникюра с акцентом: ты должна их попробовать! Топ-10 лучших вариантов осеннего маникюра с акцентом: ты должна их попробовать!

Маникюр с акцентом на один-два ногтя

VOICE
Многочасовое сидение может вызывать проблемы со здоровьем. Как минимизировать риски? Многочасовое сидение может вызывать проблемы со здоровьем. Как минимизировать риски?

Что делать, если ваша работа связана с сидячим образом жизни?

ТехИнсайдер
Одиночество в детстве предсказало проблемы с алкоголем во взрослой жизни Одиночество в детстве предсказало проблемы с алкоголем во взрослой жизни

Люди, ощущавшие одиночество в детстве, сильнее реагируют на стресс

N+1
О бесполезности больших рогов: как биологи смирились с женскими причудами О бесполезности больших рогов: как биологи смирились с женскими причудами

Загадки размножения и половой отбор

СНОБ
Форсаж американского истребителя F-15: диски Маха в небесах Форсаж американского истребителя F-15: диски Маха в небесах

Как из турбореактивных двигателей истребителя F-15 Eagle выходят диски Маха

ТехИнсайдер
От Насти Рыбки до Тинькова и Минфина США: девять судов Олега Дерипаски От Насти Рыбки до Тинькова и Минфина США: девять судов Олега Дерипаски

Дерипаска судится часто, с кем, почему и с каким результатом он это делает?

Forbes
8 самых опасных для жизни мест на Земле 8 самых опасных для жизни мест на Земле

Самые экстремальных места на планете, которые требуют стойкости для выживания

ТехИнсайдер
Города вечной жизни: 5 мест в мире, где введен запрет на смерть Города вечной жизни: 5 мест в мире, где введен запрет на смерть

Местных жителей этих городов смерть не застанет врасплох

Maxim
Почему болит голова? Объяснение психолога Почему болит голова? Объяснение психолога

Есть ли психологические причины у головных болей, и как их обнаружить?

Psychologies
Вместо сына: зачем афганским девочкам дают мужские имена Вместо сына: зачем афганским девочкам дают мужские имена

Бача-пош: что это за практика и как она влияет на афганок?

Forbes
Как отпустить умершего человека: 3 совета, чтобы начать двигаться вперед Как отпустить умершего человека: 3 совета, чтобы начать двигаться вперед

Чтобы отпустить умершего, потребуется пройти через несколько стадий горевания

Psychologies
Мини-биржа: как сервис выходцев из «Сбера» стал игроком №2 на рынке краудлендинга Мини-биржа: как сервис выходцев из «Сбера» стал игроком №2 на рынке краудлендинга

Cервис JetLend: как он увеличил свои показатели в три раза?

Forbes
Одиноко сидит город Одиноко сидит город

Все чаще слышны разговоры о том, что у больших городов нет будущего

Вокруг света
«Абонент временно недоступен»: как реагировать на звонки и сообщения от пьяных знакомых «Абонент временно недоступен»: как реагировать на звонки и сообщения от пьяных знакомых

Стоит ли вступать в «пьяные» диалоги и верить откровениям выпившего человека

Psychologies
Библия сексуальной революции и космические мечты: что почитать у Роберта Хайнлайна Библия сексуальной революции и космические мечты: что почитать у Роберта Хайнлайна

Знаковые романы Роберта Хайнлайна

ТехИнсайдер
Изнутри болезни: как живут люди с психическим расстройством? Изнутри болезни: как живут люди с психическим расстройством?

Как представить, что испытывают люди с диагнозами «шизофрения» или «депрессия»?

Psychologies
Открыть в приложении