Инженеры разработали наушники, способные распознавать мимику лица пользователя

N+1Наука

Наушники со встроенным локатором распознали выражение лица по форме щек

Андрей Фокин

Ke Li et al. / Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies, 2022

Американские инженеры разработали наушники, способные распознавать мимику лица пользователя. Для этого в каждый наушник встроен миниатюрный сонар, который с помощью звуковой эхолокации считывает информацию о движениях боковой области лица, после чего алгоритм машинного обучения восстанавливает выражение лица пользователя в реальном времени с высокой точностью. Эту информацию затем можно использовать, например, для создания анимированных аватаров в приложениях для общения. Статья с описанием устройства опубликована в журнале The Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies.

Технологии распознавания мимики лица человека, которые уже давно успешно используются для создания анимации персонажей в кино видеоиграх, постепенно проникают и в нашу повседневную жизнь. Например, компания NVIDIA предложила использовать распознавание выражения лица для снижения объемов данных, передаваемых по сети во время видеозвонков. Вместо того чтобы посылать все кадры, алгоритм сжатия посылает один кадр с лицом и данные о ключевых точках на нем, после чего компьютер на принимающей стороне анимирует этот кадр с помощью нейросети.

Эта и многие другие подобные технологии распознавания мимики обычно требуют, чтобы перед лицом постоянно находилась видеокамера, что может быть не всегда удобно. Для решения этой проблемы американские инженеры придумали технологию C-Face, которая с помощью встроенных в наушники двух камер и алгоритма машинного обучения способна распознавать мимику человека в реальном времени по движениям небольшой боковой области лица, попадающей в поле зрения устройства.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Жидкий свет сымитировал черную дыру Жидкий свет сымитировал черную дыру

Как ученые заставили поток поляритонов вести себя подобно черной дыре

N+1
Гонки с Чикатило: история Александра Пичушкина, который мечтал стать самым известным маньяком в СССР Гонки с Чикатило: история Александра Пичушкина, который мечтал стать самым известным маньяком в СССР

Битцевский маньяк собирался довести число своих жертв до 64

VOICE
Снижение конденсационных следов от самолетов назвали важной климатической мерой Снижение конденсационных следов от самолетов назвали важной климатической мерой

Чтобы снизить влияние авиации на климат, лучше сосредоточиться на следах

N+1
Почему собакам не нравятся некоторые люди Почему собакам не нравятся некоторые люди

Даже самый дружелюбный пес может облаять человека, который ему не нравится

ТехИнсайдер
Сквирт или не сквирт: вопросы, советы, подводные камни Сквирт или не сквирт: вопросы, советы, подводные камни

Рассказываем, откуда берется струйный оргазм и на что он похож

Cosmopolitan
Четыре ошибки после расставания: мнение женщин Четыре ошибки после расставания: мнение женщин

Наши героини рассказали о своем опыте расставания

Psychologies
Есть ли толк от интервального голодания: ученые попытались разобраться, но в итоге запутались еще больше Есть ли толк от интервального голодания: ученые попытались разобраться, но в итоге запутались еще больше

В чем секрет интервального голодания?

ТехИнсайдер
Что такое социальный контракт, как получить выплаты, и на какие бесплатные плюшки ты имеешь право Что такое социальный контракт, как получить выплаты, и на какие бесплатные плюшки ты имеешь право

Многие путают социальный контракт с субсидиями, но это неправильно

VOICE
Работа инсулина и рост нервов: открытия в биологии и медицине, сделанные женщинами Работа инсулина и рост нервов: открытия в биологии и медицине, сделанные женщинами

Женщины-лауреаты Нобелевской премии

Forbes
Физики-теоретики доказали устойчивость черных дыр Физики-теоретики доказали устойчивость черных дыр

Гравитационисты изучила устойчивость черной дыры Керра с малым угловым моментом

N+1
15 главных фактов о коньяке, без которых его просто стыдно пить 15 главных фактов о коньяке, без которых его просто стыдно пить

12 фактов о самом благородном из алкогольных напитков

Maxim
Маркировка полезности продуктов помешала производителю ввести европейцев в заблуждение Маркировка полезности продуктов помешала производителю ввести европейцев в заблуждение

Как меняется представление покупателей о вреде или пользе продукта

N+1
Как и почему евро стал основной валютой Европы Как и почему евро стал основной валютой Европы

Финансовый консультант объясняет, зачем в еврозоне сделали свои деньги

Maxim
Психиатр и специалист по питанию из Гарварда назвала 6 продуктов, которые сохранят мозг «молодым и здоровым» Психиатр и специалист по питанию из Гарварда назвала 6 продуктов, которые сохранят мозг «молодым и здоровым»

Чем витамины группы В полезны для мозга и в каких продуктах они содержатся

Inc.
Доисторические британцы раздробили редкий горный хрусталь и положили в погребения Доисторические британцы раздробили редкий горный хрусталь и положили в погребения

Он символизировал трансформацию мертвых и их связь с живыми

N+1
Как на самом деле действуют отбеливающие пасты и чем могут быть опасны Как на самом деле действуют отбеливающие пасты и чем могут быть опасны

Советуют ли стоматологи использовать отбеливающие пасты?

Лиза
Умер Михаил Горбачев. Жизнь первого и последнего президента СССР — в фотографиях Умер Михаил Горбачев. Жизнь первого и последнего президента СССР — в фотографиях

Вспоминаем, чем запомнилась эпоха Горбачева

Правила жизни
Это просто белый яд: разоблачаем самые распространённые мифы о соли Это просто белый яд: разоблачаем самые распространённые мифы о соли

Эту самую простую приправу обвиняют во многих грехах

VOICE
Почему новый стартап скандального основателя WeWork похож на предыдущий Почему новый стартап скандального основателя WeWork похож на предыдущий

Почему к стартапам в портфеле Адама Нойманна столько вопросов?

Forbes
Парад гигантов: Кролик размером с человека, конь — со слона и еще троица аномально огромных животных Парад гигантов: Кролик размером с человека, конь — со слона и еще троица аномально огромных животных

Эти звери не догадываются, что занимают почетное место в Книге рекордов Гиннеса

ТехИнсайдер
Эффективные способы укрепить ногти в домашних условиях Эффективные способы укрепить ногти в домашних условиях

На красоту и здоровье ногтей влияет множество факторов

VOICE
Улика — царица доказательств Улика — царица доказательств

Как расследование преступлений стало искусством

Weekend
Как кофе влияет на продолжительность жизни Как кофе влияет на продолжительность жизни

Поможет ли ваш утренний кофе дожить до 100 лет?

ТехИнсайдер
Датчик расхода воздуха: почему он так важен и как его проверить Датчик расхода воздуха: почему он так важен и как его проверить

Что такое датчик массового расхода воздуха и зачем он нужен

РБК
Темная и светлая триады личности: как наука объясняет доброе и злое начала в человеке Темная и светлая триады личности: как наука объясняет доброе и злое начала в человеке

Почему одних людей мы называем «добрыми», а других скорее считаем «злыми»?

Forbes
Сосредоточьтесь на чем-то одном: как многозадачность вредит нашему здоровью и отношениям Сосредоточьтесь на чем-то одном: как многозадачность вредит нашему здоровью и отношениям

Многозадачность на самом деле снижает нашу общую продуктивность

Psychologies
Как быстро и просто узнать возраст вашей кошки Как быстро и просто узнать возраст вашей кошки

Зубы, шерсть и вес — как выяснить, сколько лет кошке?

ТехИнсайдер
Режиссер Келли Райхардт — о фильме «Первая корова», внутренней кухне кино и о том, как снимать кино об Америке начала XIX века Режиссер Келли Райхардт — о фильме «Первая корова», внутренней кухне кино и о том, как снимать кино об Америке начала XIX века

Вспоминаем наше интервью с Келли Райхардт о картине «Первая корова»

Правила жизни
Одиноко сидит город Одиноко сидит город

Все чаще слышны разговоры о том, что у больших городов нет будущего

Вокруг света
Маргарита Терехова. Убегающая в темноту Маргарита Терехова. Убегающая в темноту

Сноб размышляет о судьбе актрисы Маргариты Тереховой

СНОБ
Открыть в приложении