Инженеры разработали наушники, способные распознавать мимику лица пользователя

N+1Наука

Наушники со встроенным локатором распознали выражение лица по форме щек

Андрей Фокин

Ke Li et al. / Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies, 2022

Американские инженеры разработали наушники, способные распознавать мимику лица пользователя. Для этого в каждый наушник встроен миниатюрный сонар, который с помощью звуковой эхолокации считывает информацию о движениях боковой области лица, после чего алгоритм машинного обучения восстанавливает выражение лица пользователя в реальном времени с высокой точностью. Эту информацию затем можно использовать, например, для создания анимированных аватаров в приложениях для общения. Статья с описанием устройства опубликована в журнале The Proceedings of the ACM on Interactive, Mobile, Wearable and Ubiquitous Technologies.

Технологии распознавания мимики лица человека, которые уже давно успешно используются для создания анимации персонажей в кино видеоиграх, постепенно проникают и в нашу повседневную жизнь. Например, компания NVIDIA предложила использовать распознавание выражения лица для снижения объемов данных, передаваемых по сети во время видеозвонков. Вместо того чтобы посылать все кадры, алгоритм сжатия посылает один кадр с лицом и данные о ключевых точках на нем, после чего компьютер на принимающей стороне анимирует этот кадр с помощью нейросети.

Эта и многие другие подобные технологии распознавания мимики обычно требуют, чтобы перед лицом постоянно находилась видеокамера, что может быть не всегда удобно. Для решения этой проблемы американские инженеры придумали технологию C-Face, которая с помощью встроенных в наушники двух камер и алгоритма машинного обучения способна распознавать мимику человека в реальном времени по движениям небольшой боковой области лица, попадающей в поле зрения устройства.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Японцы сделали роборуку с человеческими мышцами Японцы сделали роборуку с человеческими мышцами

Японские инженеры разработали биогибридную руку с человеческими мышцами

N+1
Имеет значение: чего боятся мужчины Имеет значение: чего боятся мужчины

Топ-3 списка мужских страхов и рекомендации специалиста

Psychologies
«Мамонты следующие»: Colossal Biosciences вернула к жизни вымерших 10 тысяч лет назад лютоволков «Мамонты следующие»: Colossal Biosciences вернула к жизни вымерших 10 тысяч лет назад лютоволков

Как ученым Colossal Biosciences удалось произвести на свет щенков лютоволка

VC.RU
Биологи построили теорию происхождения сложных клеток, из которых построены высшие организмы, в том числе человек Биологи построили теорию происхождения сложных клеток, из которых построены высшие организмы, в том числе человек

Как возникают сложные клетки — эукариоты?

ТехИнсайдер
Сколько лет на самом деле было героям всем известных книг Сколько лет на самом деле было героям всем известных книг

В каком возрасте герои ощутили на себе все трудности жизни

Maxim
Праведник из камеры смертников: как убийца чуть не получил Нобелевскую премию за детские книги Праведник из камеры смертников: как убийца чуть не получил Нобелевскую премию за детские книги

Преступник, который выдвигался на Нобелевскую премию девять раз

VOICE
7 цепляющих эротических триллеров, которые ты мог пропустить 7 цепляющих эротических триллеров, которые ты мог пропустить

Любовь и смерть идут рука об руку в этих фильмах

Maxim
$1,5 млн и золотой микрофон за четыре песни: история VIP-зала «Сафиса» $1,5 млн и золотой микрофон за четыре песни: история VIP-зала «Сафиса»

Самые значимые события в истории зала «Сафиса»

Forbes
Неуязвимая: как фильм-катастрофа «Одна» говорит о женской силе Неуязвимая: как фильм-катастрофа «Одна» говорит о женской силе

Как история о крушении надежд репрезентует сильную женщину

Forbes
Ученые призывали принять скорейшие меры по улучшению климата на Земле — иначе последствия могут быть ужасными Ученые призывали принять скорейшие меры по улучшению климата на Земле — иначе последствия могут быть ужасными

Изменения климата затронут все сферы жизни, что приведет к печальному финалу

ТехИнсайдер
Авангард Леонтьев. Счастливчик Авангард Леонтьев. Счастливчик

«Только сейчас начал понимать, как мне везло в жизни»

Коллекция. Караван историй
Макс-фактор Макс-фактор

О том, почему Pro Max в итоге не промах

Автопилот
Наталья Подольская и Владимир Пресняков. «Так и живем: один подумал — другой сказал» Наталья Подольская и Владимир Пресняков. «Так и живем: один подумал — другой сказал»

Интервью с Натальей Подольской о ее детях, программах и песнях

Коллекция. Караван историй
«Любимый ребенок Компартии»: как TikTok связан с провластными СМИ Китая «Любимый ребенок Компартии»: как TikTok связан с провластными СМИ Китая

Коммунистическая партия, провластные СМИ и TikTok

Forbes
Археологи нашли на новгородском Немецком дворе европейскую посуду и обувь Археологи нашли на новгородском Немецком дворе европейскую посуду и обувь

Руководитель экспедиции рассказал о находках, сделанных в слоях XIII–XIV веков

N+1
Стоит ли продвигать бизнес с помощью личного бренда: история функционального печенья BIKKI Стоит ли продвигать бизнес с помощью личного бренда: история функционального печенья BIKKI

Как личный бренд поможет сократить бюджет на маркетинг

VC.RU
Доступная заграница Доступная заграница

5 интересных стран, где нас ждут

Лиза
4 фразы нового партнера, которые должны стать для вас «красными флажками» 4 фразы нового партнера, которые должны стать для вас «красными флажками»

Как распознать сигналы, говорящие о нездоровых или даже опасных отношениях

Psychologies
Почему во время путча по телевизору показывали «Лебединое озеро» Почему во время путча по телевизору показывали «Лебединое озеро»

Как знаменитый балет стал символом путча и государственного переворота

Maxim
Город, которого нет Город, которого нет

Какими только не представлялись идеальные города мыслителям разных эпох

Вокруг света
Зачем России понадобилась отдельная сборная молодых звезд хоккея? Зачем России понадобилась отдельная сборная молодых звезд хоккея?

У российского спорта есть только два союзника

Maxim
Слизь так важна для жизни, что разные виды самостоятельно получали ее в ходе эволюции снова и снова Слизь так важна для жизни, что разные виды самостоятельно получали ее в ходе эволюции снова и снова

Слизь появлялась на мировом эволюционном древе ни один и не два раза

ТехИнсайдер
16 банальных ошибок, способных испортить любую свадьбу 16 банальных ошибок, способных испортить любую свадьбу

Чего стоит избегать, планируя свадебное торжество

Psychologies
10 недооцененных советских фильмов 10 недооцененных советских фильмов

Советские фильмы, которые незаслуженно остались в тени

Правила жизни
Самые короткие и захватывающие детективные сериалы — посмотри за вечер или за выходные! Самые короткие и захватывающие детективные сериалы — посмотри за вечер или за выходные!

Мини-сериалы с криминальным и детективным сюжетом

VOICE
Что делать с прыщами во взрослом возрасте? Что делать с прыщами во взрослом возрасте?

Подростковый возраст остался далеко позади, а прыщи все не уходят?

Maxim
Найти свою зону ближайшего развития и изменить жизнь Найти свою зону ближайшего развития и изменить жизнь

Зона ближайшего развития — работает ли это понятие для взрослых?

Psychologies
Аркадий Ипполитов Аркадий Ипполитов

Аркадий Ипполитов — о денди и экс-барабанщике группы «Кино» Георгии Гурьянове

Собака.ru
Температура в холодильнике: какой она должна быть и как её регулировать Температура в холодильнике: какой она должна быть и как её регулировать

Как настроить оптимальную температуру в холодильнике

CHIP
Как проблемы в отношениях влияют на психическое здоровье мужчин Как проблемы в отношениях влияют на психическое здоровье мужчин

Что происходит с мужчинами, когда отношения портятся или подходят к завершению?

Psychologies
Открыть в приложении