Инженеры разработали наушники, способные распознавать мимику лица пользователя

N+1Наука

Наушники со встроенным локатором распознали выражение лица по форме щек

Андрей Фокин

Ke Li et al. / Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies, 2022

Американские инженеры разработали наушники, способные распознавать мимику лица пользователя. Для этого в каждый наушник встроен миниатюрный сонар, который с помощью звуковой эхолокации считывает информацию о движениях боковой области лица, после чего алгоритм машинного обучения восстанавливает выражение лица пользователя в реальном времени с высокой точностью. Эту информацию затем можно использовать, например, для создания анимированных аватаров в приложениях для общения. Статья с описанием устройства опубликована в журнале The Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies.

Технологии распознавания мимики лица человека, которые уже давно успешно используются для создания анимации персонажей в кино видеоиграх, постепенно проникают и в нашу повседневную жизнь. Например, компания NVIDIA предложила использовать распознавание выражения лица для снижения объемов данных, передаваемых по сети во время видеозвонков. Вместо того чтобы посылать все кадры, алгоритм сжатия посылает один кадр с лицом и данные о ключевых точках на нем, после чего компьютер на принимающей стороне анимирует этот кадр с помощью нейросети.

Эта и многие другие подобные технологии распознавания мимики обычно требуют, чтобы перед лицом постоянно находилась видеокамера, что может быть не всегда удобно. Для решения этой проблемы американские инженеры придумали технологию C-Face, которая с помощью встроенных в наушники двух камер и алгоритма машинного обучения способна распознавать мимику человека в реальном времени по движениям небольшой боковой области лица, попадающей в поле зрения устройства.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Люди погубили 110 эндемичных видов растений и животных Макаронезии Люди погубили 110 эндемичных видов растений и животных Макаронезии

Человек уничтожил уже 110 эндемиков в Макаронезии

N+1
«Люди мы русские, имена же наши Карл, Инегельд, Фарлоф...» «Люди мы русские, имена же наши Карл, Инегельд, Фарлоф...»

У сторонников версии о призвании норманнов на Русь есть железный аргумент

Дилетант
Музыкальное образование может снизить возрастные когнитивные изменения Музыкальное образование может снизить возрастные когнитивные изменения

Как обучение музыке защищает мозг от одной из распространенных проблем старения

ТехИнсайдер
С кем из знаменитостей знакома королева Елизавета: от Мэрилин Монро до Леди Гаги С кем из знаменитостей знакома королева Елизавета: от Мэрилин Монро до Леди Гаги

Елизавета II за 70 лет в статусе королевы повидала немало знаменитостей

VOICE
Лекарство от уныния: как философия помогает бороться с тревогой и внутренней пустотой Лекарство от уныния: как философия помогает бороться с тревогой и внутренней пустотой

Почему в мире бесконечных возможностей мы все чаще чувствуем тревогу, пустоту?

Forbes
Гигантские изоподы: мастера выживания, о которых почти ничего не известно Гигантские изоподы: мастера выживания, о которых почти ничего не известно

Загадочное существо, способное составить тараканам конкуренцию в выживании

ТехИнсайдер
Король плиссировки и функционального дизайна: что нужно знать об Иссее Мияке Король плиссировки и функционального дизайна: что нужно знать об Иссее Мияке

Как мальчик, переживший атаку на Хиросиму, стал легендой мира моды

Правила жизни
Работа инсулина и рост нервов: открытия в биологии и медицине, сделанные женщинами Работа инсулина и рост нервов: открытия в биологии и медицине, сделанные женщинами

Женщины-лауреаты Нобелевской премии

Forbes
Краткая история телерекламы в СССР в забавных примерах Краткая история телерекламы в СССР в забавных примерах

Советские власти считали, что реклама — тлен

Maxim
Доказано, что качество нашего сна напрямую влияет на отношение к людям и желание помогать им Доказано, что качество нашего сна напрямую влияет на отношение к людям и желание помогать им

Связь между эгоизмом и качеством нашего отдыха глубже, чем кажется

ТехИнсайдер
Идеальный пресс: 5 методов, которые помогут быстро убрать жир на животе Идеальный пресс: 5 методов, которые помогут быстро убрать жир на животе

Простые способы, которые помогут похудеть в животе

ТехИнсайдер
Как сохранить желание: интервью с сексологом Как сохранить желание: интервью с сексологом

Можно ли сохранять сексуальный аппетит на протяжении долгого времени?

Psychologies
Население древнего карфагенского города оказалось генетически разнообразным Население древнего карфагенского города оказалось генетически разнообразным

Палеогенетики исследовали геномы жителей Средиземноморья железного века

N+1
Гештальт-терапия: прикосновение к реальности Гештальт-терапия: прикосновение к реальности

Как гештальт-терапия помогает нам осознать свои желания

Psychologies
«Жизнь не была загублена, пока не встретила его»: отрывок из биографии Дженис Джоплин «Жизнь не была загублена, пока не встретила его»: отрывок из биографии Дженис Джоплин

Фрагмент из книги «Дженис Джоплин — жемчужина рок-н-ролла»

Forbes
Завтрак инков Завтрак инков

Настоящий перуанец обязательно съест воскресным утром порцию тамалеса

Вокруг света
5 сайтов продажи авто, где вы точно найдете покупателя 5 сайтов продажи авто, где вы точно найдете покупателя

Онлайн-сервисы, которые помогут вам продать автомобиль

РБК
Парад гигантов: Кролик размером с человека, конь — со слона и еще троица аномально огромных животных Парад гигантов: Кролик размером с человека, конь — со слона и еще троица аномально огромных животных

Эти звери не догадываются, что занимают почетное место в Книге рекордов Гиннеса

ТехИнсайдер
Кино как улика Кино как улика

Как одна телевизионная трилогия спасла троих невинно осужденных

Weekend
Шнековая или центробежная соковыжималка: чей сок лучше Шнековая или центробежная соковыжималка: чей сок лучше

Чем отличаются разные соковыжималки по принципу работы?

CHIP
8 программ для записи видео с экрана ноутбука 8 программ для записи видео с экрана ноутбука

Самые подходящие программы для записи видео с экрана компьютера

CHIP
В Узбекистане нашли следы пребывания древних людей возрастом около 90 тысяч лет В Узбекистане нашли следы пребывания древних людей возрастом около 90 тысяч лет

Археологи исследовали памятник Куксарай-2, расположенный на Западном Тянь-Шане

N+1
Хрупкое мужское эго Хрупкое мужское эго

Почему сегодня вокруг стало так много мужчин-истеричек

Лиза
Тестируем Mitsubishi Eclipse Cross: гонять и никаких понтов Тестируем Mitsubishi Eclipse Cross: гонять и никаких понтов

Mitsubishi Eclipse Cross — оптимальный универсальный автомобиль

Maxim
Мужские гаремы и женская дружба: как устроены отношения полов в дикой природе Мужские гаремы и женская дружба: как устроены отношения полов в дикой природе

Натуралист Евгения Тимонова: о борьбе полов, феминизме, бодипозитиве — у зверей

Forbes
Самые короткие и захватывающие детективные сериалы — посмотри за вечер или за выходные! Самые короткие и захватывающие детективные сериалы — посмотри за вечер или за выходные!

Мини-сериалы с криминальным и детективным сюжетом

VOICE
«Мы знаем, чего хотят мамы» «Мы знаем, чего хотят мамы»

Алиса Лобанова определенно живет в Стране чудес

OK!
Легко сказать: 9 простых (на деле — не очень) правил, которые помогут стать здоровее и счастливее Легко сказать: 9 простых (на деле — не очень) правил, которые помогут стать здоровее и счастливее

Советы, которые помогут понять: жизнь лучше, чем кажется

Правила жизни
Города вечной жизни: 5 мест в мире, где введен запрет на смерть Города вечной жизни: 5 мест в мире, где введен запрет на смерть

Местных жителей этих городов смерть не застанет врасплох

Maxim
Птицетазовые динозавры начали жить стаями уже в юрском периоде Птицетазовые динозавры начали жить стаями уже в юрском периоде

Палеонтологи реконструировали несколько особей лесотозавров разных возрастов

N+1
Открыть в приложении