Инженеры разработали наушники, способные распознавать мимику лица пользователя

N+1Наука

Наушники со встроенным локатором распознали выражение лица по форме щек

Андрей Фокин

Ke Li et al. / Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies, 2022

Американские инженеры разработали наушники, способные распознавать мимику лица пользователя. Для этого в каждый наушник встроен миниатюрный сонар, который с помощью звуковой эхолокации считывает информацию о движениях боковой области лица, после чего алгоритм машинного обучения восстанавливает выражение лица пользователя в реальном времени с высокой точностью. Эту информацию затем можно использовать, например, для создания анимированных аватаров в приложениях для общения. Статья с описанием устройства опубликована в журнале The Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies.

Технологии распознавания мимики лица человека, которые уже давно успешно используются для создания анимации персонажей в кино видеоиграх, постепенно проникают и в нашу повседневную жизнь. Например, компания NVIDIA предложила использовать распознавание выражения лица для снижения объемов данных, передаваемых по сети во время видеозвонков. Вместо того чтобы посылать все кадры, алгоритм сжатия посылает один кадр с лицом и данные о ключевых точках на нем, после чего компьютер на принимающей стороне анимирует этот кадр с помощью нейросети.

Эта и многие другие подобные технологии распознавания мимики обычно требуют, чтобы перед лицом постоянно находилась видеокамера, что может быть не всегда удобно. Для решения этой проблемы американские инженеры придумали технологию C-Face, которая с помощью встроенных в наушники двух камер и алгоритма машинного обучения способна распознавать мимику человека в реальном времени по движениям небольшой боковой области лица, попадающей в поле зрения устройства.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Математика для бизнеса Математика для бизнеса

Зачем алгебраисты усовершенствовали бухгалтерский учет

N+1
Ссылка в «А.Л.Ж.И.Р»: как жили узницы крупнейшего женского лагеря ГУЛАГа Ссылка в «А.Л.Ж.И.Р»: как жили узницы крупнейшего женского лагеря ГУЛАГа

«А.Л.Ж.И.Р»: крупнейшее женское трудовое поселение в СССР

Forbes
ООН заявляет, что озоновый слой восстанавливается. Дыра затянется к 2066 году ООН заявляет, что озоновый слой восстанавливается. Дыра затянется к 2066 году

Защитный озоновый слой Земли постепенно восстанавливается

TechInsider
Себя слепила из того, что было: 3 вида массажа, которые лучше всего вытачивают фигуру Себя слепила из того, что было: 3 вида массажа, которые лучше всего вытачивают фигуру

Хочешь быстро привести фигуру в порядок перед отпуском? Поможет массаж!

VOICE
Как привести дела в порядок Как привести дела в порядок

Искусство продуктивности без стресса

kiozk originals
Георгий Гурьянов: художник, эстет, миф Георгий Гурьянов: художник, эстет, миф

Жизнь и творчество барабанщика группы «Кино» Георгия Гурьянова

СНОБ
Что такое социальный контракт, как получить выплаты, и на какие бесплатные плюшки ты имеешь право Что такое социальный контракт, как получить выплаты, и на какие бесплатные плюшки ты имеешь право

Многие путают социальный контракт с субсидиями, но это неправильно

VOICE
Неужели паре пришел конец? Неужели паре пришел конец?

На что надеяться в любви, а от чего предстоит отказаться?

Psychologies
Аркадий Ипполитов Аркадий Ипполитов

Аркадий Ипполитов — о денди и экс-барабанщике группы «Кино» Георгии Гурьянове

Собака.ru
Что значит смерть Михаила Горбачева для россиян: комментарий психолога Что значит смерть Михаила Горбачева для россиян: комментарий психолога

Смерть Михаила Горбачева — новая перестройка, но уже в сознании?

Psychologies
«Боец музыкального фронта» «Боец музыкального фронта»

Жавдет Айдаров навсегда остался настоящим ленинградцем

Дилетант
NLP: терапевтическая магия или обман NLP: терапевтическая магия или обман

Как работают техники НЛП?

Лиза
10 современных фильмов о выживании 10 современных фильмов о выживании

Фильмы о том, как выжить в снегах, в самолетах и в лапах диких животных

Maxim
«Да я из-за тебя…»: 20 фраз, которые выдадут в мужчине токсичного отца «Да я из-за тебя…»: 20 фраз, которые выдадут в мужчине токсичного отца

Какие фразы свидетельствуют о том, что мужчина — токсичный родитель?

Psychologies
Шведы показали превосходство кнопок и крутилок над сенсорным управлением в автомобиле Шведы показали превосходство кнопок и крутилок над сенсорным управлением в автомобиле

Прогресс не всегда полезен: сенсорное управление в машинах оказалось неудобным

N+1
О чем на самом деле думают мужчины? Разбираемся, стоит ли это угадывать О чем на самом деле думают мужчины? Разбираемся, стоит ли это угадывать

Что ОН хотел этим сказать, о чем ОН думает, почему ОН так поступил

VOICE
Исследование показало, какую сексуальную практику предпочитают устойчивые пары Исследование показало, какую сексуальную практику предпочитают устойчивые пары

Секс втроем положительно сказывается на моногамных отношениях

Psychologies
Неочевидные детали, на которые нужно обратить внимание при покупке б/у смартфона Неочевидные детали, на которые нужно обратить внимание при покупке б/у смартфона

Как купить подержанный телефон и не облажаться

Maxim
Тяга к алкоголю у женщин чаще превращается в зависимость Тяга к алкоголю у женщин чаще превращается в зависимость

Связь между плохим настроением и желанием выпить может привести к зависимости

TechInsider
Что такое коленвал и почему он может сломаться Что такое коленвал и почему он может сломаться

Что делает коленвал таким незаменимым и как обеспечить ему активное долголетие?

РБК
«Автостопом по мозгу. Когда вся вселенная у тебя в голове». Все об устройстве и работе мозга «Автостопом по мозгу. Когда вся вселенная у тебя в голове». Все об устройстве и работе мозга

Пора заглянуть внутрь: что же происходит в мозге, когда мы ничем не заняты?

N+1
«Хочу быть вместе с ней»: каким был Михаил Горбачев в мемуарах своей жены Раисы «Хочу быть вместе с ней»: каким был Михаил Горбачев в мемуарах своей жены Раисы

В день смерти Михаила Горбачева Forbes Woman обратился к мемуарам его жены Раисы

Forbes
Потерянный человек в потерянном раю Потерянный человек в потерянном раю

Памяти Натальи Нестеровой

Weekend
«Люби меня, как я тебя»: почему в счастливых отношениях нам не хватает взаимности «Люби меня, как я тебя»: почему в счастливых отношениях нам не хватает взаимности

Почему в отношениях кто-то один или оба не чувствуют себя по-настоящему любимыми

Psychologies
Древнейшие земледельцы сформировались из трех предковых популяций Древнейшие земледельцы сформировались из трех предковых популяций

Ученые разобрались в происхождении населения эпохи докерамического неолита

N+1
Болезнь тридцатилетних. Что такое кризис четверти жизни и как его правильно прожить Болезнь тридцатилетних. Что такое кризис четверти жизни и как его правильно прожить

Почему люди испытывают кризис четверти жизни?

Inc.
Боязнь пропустить интересное: 8 признаков зависимости от смартфона Боязнь пропустить интересное: 8 признаков зависимости от смартфона

Проверьте, не попали ли вы в цифровую кабалу

Psychologies
Кирилл Рябов: «Женщина» Кирилл Рябов: «Женщина»

Отрывок из сборника рассказов, соединяющего лейтмотивы гуманистической традиции

СНОБ
Лучшие алкогольные рецепты с арбузом: от классики до экзотических Лучшие алкогольные рецепты с арбузом: от классики до экзотических

Как вдохнуть алкогольную страсть в отношения с арбузом.

Maxim
Какие тайны выдают дома Анастасии Волочковой, Николая Баскова и Яны Рудковской о своих владельцах — рассказывает эксперт Какие тайны выдают дома Анастасии Волочковой, Николая Баскова и Яны Рудковской о своих владельцах — рассказывает эксперт

О чем говорит дизайн домов знаменитостей

Maxim
Открыть в приложении