Инженеры разработали наушники, способные распознавать мимику лица пользователя

N+1Наука

Наушники со встроенным локатором распознали выражение лица по форме щек

Андрей Фокин

Ke Li et al. / Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies, 2022

Американские инженеры разработали наушники, способные распознавать мимику лица пользователя. Для этого в каждый наушник встроен миниатюрный сонар, который с помощью звуковой эхолокации считывает информацию о движениях боковой области лица, после чего алгоритм машинного обучения восстанавливает выражение лица пользователя в реальном времени с высокой точностью. Эту информацию затем можно использовать, например, для создания анимированных аватаров в приложениях для общения. Статья с описанием устройства опубликована в журнале The Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies.

Технологии распознавания мимики лица человека, которые уже давно успешно используются для создания анимации персонажей в кино видеоиграх, постепенно проникают и в нашу повседневную жизнь. Например, компания NVIDIA предложила использовать распознавание выражения лица для снижения объемов данных, передаваемых по сети во время видеозвонков. Вместо того чтобы посылать все кадры, алгоритм сжатия посылает один кадр с лицом и данные о ключевых точках на нем, после чего компьютер на принимающей стороне анимирует этот кадр с помощью нейросети.

Эта и многие другие подобные технологии распознавания мимики обычно требуют, чтобы перед лицом постоянно находилась видеокамера, что может быть не всегда удобно. Для решения этой проблемы американские инженеры придумали технологию C-Face, которая с помощью встроенных в наушники двух камер и алгоритма машинного обучения способна распознавать мимику человека в реальном времени по движениям небольшой боковой области лица, попадающей в поле зрения устройства.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

TESS отыскал экзогиганта у очень маломассивной звезды TESS отыскал экзогиганта у очень маломассивной звезды

TESS вновь обнаружил экзогиганта у маломассивной звезды

N+1
Футбол и лирика: в прокат вышел документальный фильм о клубе «Манчестер Юнайтед» Футбол и лирика: в прокат вышел документальный фильм о клубе «Манчестер Юнайтед»

До российского проката добрался документальный фильм «Великий «Юнайтед»

Forbes
Тайна самых древних галактик остается неразрешимой Тайна самых древних галактик остается неразрешимой

Джеймс Уэбб он столкнулся с тайной, которую не удается разрешить до сих пор

ТехИнсайдер
Что появилось раньше: мышечный орган в ротовой полости или речь? И вообще, почему язык прозвали языком? Что появилось раньше: мышечный орган в ротовой полости или речь? И вообще, почему язык прозвали языком?

Орган или речь — кто был первым?

ТехИнсайдер
Ежи от болезней и средневековый фастфуд: странные пищевые привычки времен Средневековья Ежи от болезней и средневековый фастфуд: странные пищевые привычки времен Средневековья

Страдающие ежи и Средневековье: что ели люди в эпоху рыцарей?

ТехИнсайдер
У мужа дети от предыдущего брака: 7 лайфхаков для мачехи У мужа дети от предыдущего брака: 7 лайфхаков для мачехи

Как избежать ошибок, став мачехой?

Psychologies
Яна Сексте: Яна Сексте:

Бомба замедленного действия — Яна Сексте

Караван историй
Протоны могут содержать кварки, которые массивнее самих протонов: парадокс квантовой физики Протоны могут содержать кварки, которые массивнее самих протонов: парадокс квантовой физики

Протоны могут быть куда сложнее, чем мы привыкли думать

ТехИнсайдер
Что такое настоящая любовь к женщине: смешная и мудрая цитата Романа Карцева Что такое настоящая любовь к женщине: смешная и мудрая цитата Романа Карцева

Монологи Романа Карцева смешат нас до сих пор

VOICE
Георгий Гурьянов: художник, эстет, миф Георгий Гурьянов: художник, эстет, миф

Жизнь и творчество барабанщика группы «Кино» Георгия Гурьянова

СНОБ
Забыть и отпустить: 5 сигналов, что это не ваш мужчина Забыть и отпустить: 5 сигналов, что это не ваш мужчина

Как определить, что это не ваш мужчина?

Psychologies
Финансовая сепарация: что делать, если женщина материально зависит от мужа Финансовая сепарация: что делать, если женщина материально зависит от мужа

Как бороться с финансовой зависимостью в отношениях?

Psychologies
Футболисты, сидевшие в тюрьме: один расчленил любовницу и скормил собакам Футболисты, сидевшие в тюрьме: один расчленил любовницу и скормил собакам

Достойные компаньоны Кокорину и Мамаеву

Maxim
Формируем полезные привычки: 3 лайфхака Формируем полезные привычки: 3 лайфхака

Как без лишних усилий развить и закрепить желаемое поведение

Psychologies
Почему вы просыпаетесь уставшим: 8 причин Почему вы просыпаетесь уставшим: 8 причин

Многие люди часто не просто не высыпаются, а встают разбитыми и уставшими

ТехИнсайдер
Маркировка полезности продуктов помешала производителю ввести европейцев в заблуждение Маркировка полезности продуктов помешала производителю ввести европейцев в заблуждение

Как меняется представление покупателей о вреде или пользе продукта

N+1
Мифы и суеверия: почему информатика теперь — это необходимая наука об окружающем мире Мифы и суеверия: почему информатика теперь — это необходимая наука об окружающем мире

Почему в современном мире необходимо пересмотреть отношение к информатике

Forbes
Платья непрямого действия Платья непрямого действия

Путеводитель по сюрреалистическим мирам Эльзы Скьяпарелли

Weekend
История одной песни: «Gangnam Style», PSY, 2012 История одной песни: «Gangnam Style», PSY, 2012

Летом 2012 года YouTube пережил первое в своей истории музыкальное потрясение

Maxim
«Вещная жизнь: материальность позднего социализма». «Вещная жизнь: материальность позднего социализма».

Отрывок из книги «Вещная жизнь» — о том, как железо в СССР было связано с силой

N+1
Анализ 777 древних геномов прояснил происхождение популяций эпохи палеометалла Анализ 777 древних геномов прояснил происхождение популяций эпохи палеометалла

Историю индоевропейских языков можно проследить до ямной культуры

N+1
Как переживал начало Второй мировой войны ювелирный дом Cartier Как переживал начало Второй мировой войны ювелирный дом Cartier

Отрывок из книги об одном из самых известных ювелирных домов в мире

СНОБ
Правила секса Светланы Бондарчук Правила секса Светланы Бондарчук

Приглашенный главный редактор делится открытиями на пути принятия себя

Psychologies
Кофейный пояс, пыльный котел, банановая республика: расшифровываем 7 географических метафор Кофейный пояс, пыльный котел, банановая республика: расшифровываем 7 географических метафор

Что скрывается за звучными названиями мест, маршрутов и событий

Вокруг света
Как рэпер 50 Сent помог продавать воду дорого и заработал на этом $100 млн Как рэпер 50 Сent помог продавать воду дорого и заработал на этом $100 млн

Отрывок из книги «Hustle Harder, Hustle Smarter» о жизни 50 Сent

Forbes
«Тараканы» руководителя: как мышление лидера влияет на команду «Тараканы» руководителя: как мышление лидера влияет на команду

Сотрудники перенимают модель поведения руководителя

Psychologies
Недалеко от Багамских островов нашли обломки испанского галеона с сокровищами Недалеко от Багамских островов нашли обломки испанского галеона с сокровищами

Исследовано место крушения испанского галеона, затонувшего больше 350 лет назад

N+1
Только не сейчас Только не сейчас

Что делать, если зубная боль настигла в разгар отпуска

Лиза
Зачем TikTok база изображений сексуализированного насилия над несовершеннолетними Зачем TikTok база изображений сексуализированного насилия над несовершеннолетними

С какими материалами работают модераторы контента в TikTok?

Forbes
Почему ты должен платить за воздух Почему ты должен платить за воздух

Прогресс привел к загрязнению атмосферы, но дал нам очистители воздуха для дома

Maxim
Открыть в приложении