Инженеры разработали наушники, способные распознавать мимику лица пользователя

N+1Наука

Наушники со встроенным локатором распознали выражение лица по форме щек

Андрей Фокин

Ke Li et al. / Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies, 2022

Американские инженеры разработали наушники, способные распознавать мимику лица пользователя. Для этого в каждый наушник встроен миниатюрный сонар, который с помощью звуковой эхолокации считывает информацию о движениях боковой области лица, после чего алгоритм машинного обучения восстанавливает выражение лица пользователя в реальном времени с высокой точностью. Эту информацию затем можно использовать, например, для создания анимированных аватаров в приложениях для общения. Статья с описанием устройства опубликована в журнале The Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies.

Технологии распознавания мимики лица человека, которые уже давно успешно используются для создания анимации персонажей в кино видеоиграх, постепенно проникают и в нашу повседневную жизнь. Например, компания NVIDIA предложила использовать распознавание выражения лица для снижения объемов данных, передаваемых по сети во время видеозвонков. Вместо того чтобы посылать все кадры, алгоритм сжатия посылает один кадр с лицом и данные о ключевых точках на нем, после чего компьютер на принимающей стороне анимирует этот кадр с помощью нейросети.

Эта и многие другие подобные технологии распознавания мимики обычно требуют, чтобы перед лицом постоянно находилась видеокамера, что может быть не всегда удобно. Для решения этой проблемы американские инженеры придумали технологию C-Face, которая с помощью встроенных в наушники двух камер и алгоритма машинного обучения способна распознавать мимику человека в реальном времени по движениям небольшой боковой области лица, попадающей в поле зрения устройства.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Узкий таз защитил от артрита колена и опущения органов Узкий таз защитил от артрита колена и опущения органов

Широкий таз облегчает деторождение, но добавляет других проблем со здоровьем

N+1
Как оптимизировать Windows 11 и Windows 10 для игр: компьютер будет «летать»! Как оптимизировать Windows 11 и Windows 10 для игр: компьютер будет «летать»!

Мало купить мощный компьютер, его нужно еще и оптимизировать

ТехИнсайдер
Новые методы помогут искать воду в лунных кратерах и глубоко под поверхностью Новые методы помогут искать воду в лунных кратерах и глубоко под поверхностью

Ученые пытаются определить, где и сколько льда находится на Луне

ТехИнсайдер
Зашла на час, потеряла день: почему мы впадаем в зависимость от игр Зашла на час, потеряла день: почему мы впадаем в зависимость от игр

Что заставляет нас тратить часы своей жизни на это бессмысленную игру три в ряд?

VOICE
Это не лень, а депрессия: 5 сигналов, что тебе нужна помощь Это не лень, а депрессия: 5 сигналов, что тебе нужна помощь

Как отличить депрессию от усталости или лени

VOICE
Кинематограф управляет вашими эмоциями. На что нужно обратить внимание Кинематограф управляет вашими эмоциями. На что нужно обратить внимание

Десятилетие за десятилетием киноискусство овладевает умами

ТехИнсайдер
5 самых высокотехнологичных ограблений: тонкий расчет 5 самых высокотехнологичных ограблений: тонкий расчет

Много ли высокотехнологичных ограблений банка в реальном мире?

ТехИнсайдер
Это просто белый яд: разоблачаем самые распространённые мифы о соли Это просто белый яд: разоблачаем самые распространённые мифы о соли

Эту самую простую приправу обвиняют во многих грехах

VOICE
Забытый король вестернов Том Микс: ковбой с простреленным горлом и легенда Голливуда Забытый король вестернов Том Микс: ковбой с простреленным горлом и легенда Голливуда

Том Микс — реальный ковбой со сломанным носом и простреленным горлом

Maxim
6 деталей, которые сделают любой образ безвкусным и «дешевым»: мнение жены миллионера 6 деталей, которые сделают любой образ безвкусным и «дешевым»: мнение жены миллионера

Какие детали могут испортить самый дорогой образ?

VOICE
Озарение по Эдисону: как использовать фазы сна для решения сложных задач Озарение по Эдисону: как использовать фазы сна для решения сложных задач

Главное в этом процессе — не заснуть слишком глубоко

VC.RU
Краткая история телерекламы в СССР в забавных примерах Краткая история телерекламы в СССР в забавных примерах

Советские власти считали, что реклама — тлен

Maxim
«Боец музыкального фронта» «Боец музыкального фронта»

Жавдет Айдаров навсегда остался настоящим ленинградцем

Дилетант
В каких фруктах и ягодах больше всего белка В каких фруктах и ягодах больше всего белка

Что поможет тебе не только восполнить дефицит витаминов, но и набрать массу

Maxim
Обезболивающие препараты могут усугубить болезнь: новые доказательства Обезболивающие препараты могут усугубить болезнь: новые доказательства

Снимая воспаление, эти лекарства провоцируют превращение боли в хроническую

Psychologies
Непентес приспособился использовать энергию падающих капель дождя для поимки жертв Непентес приспособился использовать энергию падающих капель дождя для поимки жертв

Механизм ловушки этого растения работает не так, как предполагалось ранее

N+1
Оказалось, что вода спонтанно превращается в перекись — и с этим связана сезонность простуды и гриппа Оказалось, что вода спонтанно превращается в перекись — и с этим связана сезонность простуды и гриппа

Ученые доказали, что микрокапли воды могут превращаться в перекись сами по себе

ТехИнсайдер
«Яндекс» создал промышленных роботов для складов и дарксторов «Яндекс» создал промышленных роботов для складов и дарксторов

«Яндекс» создал и протестировал двух промышленных роботов

Forbes
Цвет личности: что расскажет о вас выпускное платье Цвет личности: что расскажет о вас выпускное платье

Как цвет платья на выпускном отражает ваше психологическое состояние?

Psychologies
Археологи обнаружили древнейшее просо Британии Археологи обнаружили древнейшее просо Британии

Это просо вырастили в Британии около 910–800 годов до нашей эры

N+1
Как переоформить автомобиль разными способами Как переоформить автомобиль разными способами

Переоформление автомобиля: нормы закона и нюансы

РБК
Людмила Петрановская: Про возраст, время и подснежники Людмила Петрановская: Про возраст, время и подснежники

Отрывок из книги психолога Людмилы Петрановской «Взрослые и дети. #Многобукв»

СНОБ
Дачное настроение Дачное настроение

Боремся с сорняками, ищем применение для старой бочки и высаживаем клумбы

Лиза
Бескровная дуэль, катание на костях и другие забытые виды спорта: отрывок из книги Бескровная дуэль, катание на костях и другие забытые виды спорта: отрывок из книги

Отрывок из книги Эдварда Брука-Хитчинга — о том, как наши предки проводили досуг

СНОБ
Веру в удачу и предсказания связали с индексом человеческого развития Веру в удачу и предсказания связали с индексом человеческого развития

Почему в одних странах в сверхъестественное верят меньше, чем в других?

N+1
«Сердца я ел»: история каннибала Александра Бычкова, который в тюрьме женился на американке «Сердца я ел»: история каннибала Александра Бычкова, который в тюрьме женился на американке

Александр Бычков словно хотел, чтобы его поймали

VOICE
В 6000-летнем захоронении обнаружили сотни сверкающих кристаллов В 6000-летнем захоронении обнаружили сотни сверкающих кристаллов

Дюди эпохи неолита использовали кварц для украшения могил в западной Англии

ТехИнсайдер
Трюк имени Мэрилин: лучшие платья Монро, которые скроют твои недостатки Трюк имени Мэрилин: лучшие платья Монро, которые скроют твои недостатки

Монро умела маскировать недостатки так, чтобы об их наличии никто не догадывался

VOICE
7 милых и крайне опасных представителей мира животных 7 милых и крайне опасных представителей мира животных

Милые животные, встреча с которыми может быть смертельно опасна

ТехИнсайдер
10 недооцененных советских фильмов 10 недооцененных советских фильмов

Советские фильмы, которые незаслуженно остались в тени

Правила жизни
Открыть в приложении