Инженеры разработали наушники, способные распознавать мимику лица пользователя

N+1Наука

Наушники со встроенным локатором распознали выражение лица по форме щек

Андрей Фокин

Ke Li et al. / Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies, 2022

Американские инженеры разработали наушники, способные распознавать мимику лица пользователя. Для этого в каждый наушник встроен миниатюрный сонар, который с помощью звуковой эхолокации считывает информацию о движениях боковой области лица, после чего алгоритм машинного обучения восстанавливает выражение лица пользователя в реальном времени с высокой точностью. Эту информацию затем можно использовать, например, для создания анимированных аватаров в приложениях для общения. Статья с описанием устройства опубликована в журнале The Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies.

Технологии распознавания мимики лица человека, которые уже давно успешно используются для создания анимации персонажей в кино видеоиграх, постепенно проникают и в нашу повседневную жизнь. Например, компания NVIDIA предложила использовать распознавание выражения лица для снижения объемов данных, передаваемых по сети во время видеозвонков. Вместо того чтобы посылать все кадры, алгоритм сжатия посылает один кадр с лицом и данные о ключевых точках на нем, после чего компьютер на принимающей стороне анимирует этот кадр с помощью нейросети.

Эта и многие другие подобные технологии распознавания мимики обычно требуют, чтобы перед лицом постоянно находилась видеокамера, что может быть не всегда удобно. Для решения этой проблемы американские инженеры придумали технологию C-Face, которая с помощью встроенных в наушники двух камер и алгоритма машинного обучения способна распознавать мимику человека в реальном времени по движениям небольшой боковой области лица, попадающей в поле зрения устройства.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

У берегов Сингапура нашли 3,5 тонны средневековой китайской посуды У берегов Сингапура нашли 3,5 тонны средневековой китайской посуды

С давних времен остров Сингапур выступал важным перевалочным пунктом для моряков

N+1
В 19 лет прославилась, в 20 убита мужем: трагическая судьба звезды Playboy Дороти Страттен В 19 лет прославилась, в 20 убита мужем: трагическая судьба звезды Playboy Дороти Страттен

В свои 20 лет Дороти Страттен имела всё — мужа, популярность, работу мечты

VOICE
Биомаркеры болезней сердца предсказали риск возникновения рака Биомаркеры болезней сердца предсказали риск возникновения рака

Какие биомаркеры сердечно-сосудистых заболеваний могут ускорять развитие рака

N+1
Последний генеральный. Жизнь и смерть Михаила Горбачева Последний генеральный. Жизнь и смерть Михаила Горбачева

За что любили и ненавидели Михаила Сергеевича Горбачева

Правила жизни
Что такое калланетика и помогает ли она похудеть: 9 упражнений Что такое калланетика и помогает ли она похудеть: 9 упражнений

Эффективный комплекс упражнений для укрепления мышц, которые можно делать дома

РБК
Ресторатор Борис Зарьков — о японской муке, машине и The World's 50 Best Ресторатор Борис Зарьков — о японской муке, машине и The World's 50 Best

Ресторатором Борисом Зарьковым — о насмотренности, любви к Японии и планах

РБК
Как мы дошли до спотифая? Краткая история звукозаписи Как мы дошли до спотифая? Краткая история звукозаписи

Звучащая речь из 19 века преодолела свой путь в 21 век силами не одного ученого

ТехИнсайдер
Куркумин и антибиотики в кухонном шкафу: что нужно есть, чтобы повышать иммунитет Куркумин и антибиотики в кухонном шкафу: что нужно есть, чтобы повышать иммунитет

Отрывок из книги «Что мы знаем (и не знаем) о еде»

Forbes
Что не так с истребителем F-35: проблемы авиации V поколения Что не так с истребителем F-35: проблемы авиации V поколения

Почему в истребителях F-35 пилоты чувствуют себя плохо?

ТехИнсайдер
Уровень воды в Ниле позволил египтянам подвозить камень к месту строительства пирамид Уровень воды в Ниле позволил египтянам подвозить камень к месту строительства пирамид

Как египтяне возводили пирамиды Гизы?

N+1
По заветам матери Терезы: личная история волонтерства в Индии По заветам матери Терезы: личная история волонтерства в Индии

Волонтерство: пролететь полмира, чтобы бескорыстно помогать страдающим

Вокруг света
6 продуктов, которые категорически нельзя есть во время похудения 6 продуктов, которые категорически нельзя есть во время похудения

Пищевые ловушки здоровых продуктов

ТехИнсайдер
Это просто белый яд: разоблачаем самые распространённые мифы о соли Это просто белый яд: разоблачаем самые распространённые мифы о соли

Эту самую простую приправу обвиняют во многих грехах

VOICE
«Каждый день?»: как часто необходимо мыться «Каждый день?»: как часто необходимо мыться

Как найти золотую середину в вопроса регулярной гигиены?

Psychologies
Давай голосом. Вспоминаем историю Siri — голосового помощника, который опередил Google, продался Apple и изменил жизни миллионов Давай голосом. Вспоминаем историю Siri — голосового помощника, который опередил Google, продался Apple и изменил жизни миллионов

Отрывок из книги «Harvard Business Review: 10 лучших статей»

Inc.
Технологии в помощь здоровому сну: современные и необычные гаджеты для повышения качества сна Технологии в помощь здоровому сну: современные и необычные гаджеты для повышения качества сна

Среди специалистов по сну активно обсуждается вред для сна от гаджетов

ТехИнсайдер
«Облачно, возможны косатки». Морской биолог рассказывает, как они живут и общаются между собой «Облачно, возможны косатки». Морской биолог рассказывает, как они живут и общаются между собой

Отрывок из книги «Облачно, возможны косатки» — как косатки видят и слышат

N+1
Студент Эйнштейн Студент Эйнштейн

Путь Эйнштейна в науку был совсем не таким прямым и естественным

Наука и жизнь
Позитивный пиар при небольших инвестициях: почему бренды поддерживают женский спорт Позитивный пиар при небольших инвестициях: почему бренды поддерживают женский спорт

Женский спорт созрел для серьезной монетизации

Forbes
Поворот сюжета Поворот сюжета

История лесничего Ивана Рейнмана

Дилетант
Хайп мирового масштаба от исследователя NASA. Кто придумал нейросеть Midjourney и отберет ли она работу у живых художников и дизайнеров? Хайп мирового масштаба от исследователя NASA. Кто придумал нейросеть Midjourney и отберет ли она работу у живых художников и дизайнеров?

Может ли машина заменить живых дизайнеров? История нейросети Midjourney

Inc.
20 способов испортить окружающим людям весь кайф 20 способов испортить окружающим людям весь кайф

Рассказываем о самых циничных способах не дать людям получить наслаждение

Maxim
Как на самом деле действуют отбеливающие пасты и чем могут быть опасны Как на самом деле действуют отбеливающие пасты и чем могут быть опасны

Советуют ли стоматологи использовать отбеливающие пасты?

Лиза
Кофейный пояс, пыльный котел, банановая республика: расшифровываем 7 географических метафор Кофейный пояс, пыльный котел, банановая республика: расшифровываем 7 географических метафор

Что скрывается за звучными названиями мест, маршрутов и событий

Вокруг света
Бегаю в туалет каждые 15 минут: как я живу с гиперактивным мочевым пузырем Бегаю в туалет каждые 15 минут: как я живу с гиперактивным мочевым пузырем

Как проявляется гиперактивность мочевого пузыря?

VOICE
Правила жизни Роберта Де Ниро Правила жизни Роберта Де Ниро

Правила жизни актера Роберта Де Ниро

Правила жизни
О бесполезности больших рогов: как биологи смирились с женскими причудами О бесполезности больших рогов: как биологи смирились с женскими причудами

Загадки размножения и половой отбор

СНОБ
Соберись, тряпка: как создать успешный и социально значимый бизнес на ненужных вещах Соберись, тряпка: как создать успешный и социально значимый бизнес на ненужных вещах

Из старой одежды можно сделать не только ветошь, но и синтетическое топливо

Forbes
Что должно быть в машине: 25+ необходимых вещей Что должно быть в машине: 25+ необходимых вещей

Автомобиль не склад, однако множество вещей в нем возить необходимо

РБК
Изнутри болезни: как живут люди с психическим расстройством? Изнутри болезни: как живут люди с психическим расстройством?

Как представить, что испытывают люди с диагнозами «шизофрения» или «депрессия»?

Psychologies
Открыть в приложении