Как Иван Пупырев разработал технологию Soli

ForbesHi-Tech

«Мне говорили, что это никогда не будет работать»: как российский инженер Google научил телефон понимать жесты

Ирина Юзбекова

mg_6963-2-1.jpg__1573649342__99631.jpg
Фото ivanpoupyrev.com

Российский инженер Иван Пупырев в 2014 году начал работать над технологией Soli, которая спустя пять лет позволила Google выпустить первый в мире смартфон, понимающий взмахи рук пользователя — Pixel 4. Forbes поговорил с изобретателем о проблемах, с которыми столкнулись создатели смартфона, о новых проектах российского изобретателя и сложностях в работе с талантливыми людьми.

15 октября 2019 года компания Google презентовала свои новые продукты, в том числе показала следующую версию своего смартфона — Pixel 4. Новинка умеет распознавать пользователя по лицу под любым углом. Кроме того, устройство получило новую технологию — Motion Sense, которая позволяет ему понимать жесты пользователя. Рядом с камерой Pixel 4 расположился мини-радар, который понимает движения рук человека без прикосновения к экрану. Над его созданием в рамках проекта Soli, основанном на технологии радарного датчика, последние пять лет работал Иван Пупырев, руководитель проектов лаборатории Google Advanced Technology and Projects (ATAP), которая занимается нестандартными разработками.

До того, как прийти в Google, Пупырев, выпускник Московского авиационного института (МАИ), успел поработать с Disney и Sony. В Disney он создал 17 интерактивных технологий, часть из которых компания задействовала в своих парках аттракционов. Самая главная из них — Touché, которая позволяла распознавать прикосновения человека к предмету, растению или даже воде.

Работая в Sony, Пупырев еще до появления первого iPhone в 2007 году, предлагал выпустить мобильный телефон с сенсорным дисплеем, но в компании не поддержали эту идею, хотя Пупырев уверен, что японская корпорация могла опередить появление iPhone. Пупырев и его коллеги из Sony придумали другой проект — Gummi. Это небольшой дисплей, на котором для перемещения объектов можно водить пальцем по оборотной стороне устройства. Sony применила технологию задней сенсорной панели на игровой консоли PlayStation Vita, которую выпустила в 2011 году.

Forbes побеседовал с инженером о невербальном взаимодействии человека с техникой, привычке людей к кнопкам, «умных куртках» и «сумасшедших идеях», которые работают.

Чем отличаются технология Soli и датчик Motion Sense в смартфоне Pixel 4?

Motion Sense – это не другая технология, это та же самая Soli. С точки зрения брендинга Pixel 4 в Google решили назвать ее Motion Sense. В телефоне у нее более узкое применение: она должна распознавать взаимодействия пользователя с телефоном. Для того, чтобы пользователю было понятнее, что это за технология, ее назвали Motion Sense.

Какой функционал Soli задействован в смартфоне?

Само по себе технология может делать много вещей. Так как она новая и была создана с нуля, мы решили ограничить ее использование. Кроме того, мы столкнулись с большим количеством технических трудностей при ее внедрении.

Сейчас технология используется для распознавания человеческих действий. Философия применения Soli в интерфейсах состоит в том, что смартфон должен понимать, что вокруг него происходит и это не должно требовать от пользователя каких-то специальных действий. Это то, что мы называем невербальное взаимодействие — без использования голоса или кнопок. Мы заинтересованы в том, чтобы телефон был умный как человек, и понимал, что происходит вокруг, понимал контекст.

Сейчас, например, в нем есть функция, которая позволяет жестом убавить звук звонящего телефона. Можно жестом отключить звонок или будильник. Это очень удобно, потому что когда в семь утра звонит будильник и ты пытаешься проснуться, тебе не надо брать телефон и нажимать какую-то кнопку – ты просто протягиваешь руку и звук отключается сам.

В Pixel 4 есть также технология идентификации пользователя по лицу. Тут всегда возникает вопрос, когда должны включаться камеры распознавания. Если они работают все время, то у вашего телефона быстро сядет батарейка. Поэтому телефон должен распознавать «знаки», которые сигнализируют о том, что пользователь намеревается использовать эту функцию. Soli позволяет нашему телефону понимать намерения. Если Pixel 4 лежит на столе, а рука пользователя протягивается к нему, в этот момент камеры уже активируются и начинают работать еще до того, как владелец поднес телефон к лицу. Эта комбинация сенсоров ускоряет процесс, и сохраняет заряд батарейки.

Последняя функция состоит в том, что когда телефон лежит на столе, а вас рядом нет, то его дисплей выключается. А когда вы подходите к телефону, он снова включается.

Сенсор может делать гораздо больше, но все эти вещи — новые для пользователя. Поэтому мы бы хотели, чтобы пользователи привыкли к тому, что есть сейчас, а потом подумаем о расширении возможностей.

С какими сложностями вы столкнулись при внедрении Soli в Pixel 4?

Внедрение любой технологии, разработанной в лаборатории, в продукт — это долгий и тяжелый процесс. Когда вы работаете над исследованием, вам надо показать, что технология работает хотя бы один раз. Когда вы работаете над продуктом, нужно показать, что технология работает всегда. Вам нужно принять во внимание огромное количество ситуаций, при которых она не будет работать. Что происходит с Soli, когда человек роняет телефон, что происходит, когда другие сенсоры включены, есть ли какое-то ненужное взаимодействие между другими сенсорами и Soli? Ни у одной компании в мире нет опыта внедрения радара в мобильный телефон. Поэтому нет никакой документации на этот счет.

Поскольку индустрия мобильных телефонов уже довольно развитая, большое количество знаний о том, как делать телефон, находится на фабриках. У фабрик, которые делают телефоны, есть много наработанных производственных технологий. Но когда они получают новую технологию, они тоже не знают, что с ней делать. Им нужно выстраивать новую продуктовую линию, тренировать операторов на фабрике, определять возникающие проблемы, потому что они еще никогда не внедряли эту технологию. Нужно учитывать огромное количество деталей, потому что, когда ты выпускаешь миллион телефонов, маленькая деталь может повлиять на тысячи людей.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

На своем месте На своем месте

В этом году в жизни Владимира Мединского большие перемены

GQ
#прохобби: соосновательница Readymag Диана Касай — о поисках себя #прохобби: соосновательница Readymag Диана Касай — о поисках себя

Как совмещать свои интересы с постом CEO международной компании

РБК
Правила жизни Джона Леннона Правила жизни Джона Леннона

Музыкант, умер 8 декабря 1980 года в Нью-Йорке в возрасте 40 лет

Esquire
Ингрид Олеринская: «С легкостью трачу деньги» Ингрид Олеринская: «С легкостью трачу деньги»

Актриса Ингрид Олеринская рассказала, что бы приготовила на последние 100 рублей

StarHit
Комфортный стиль: как правильно закатывать рукава на рубашке Комфортный стиль: как правильно закатывать рукава на рубашке

Согласись, длинные рукава – это красиво, но не всегда удобно

Cosmopolitan
Кто такая Лиззо и почему все о ней говорят Кто такая Лиззо и почему все о ней говорят

Если для кого-то год и выдался удачным, то точно для певицы Лиззо

GQ
Одна и счастлива: что такое «партнерство с собой» Одна и счастлива: что такое «партнерство с собой»

Эмма Уотсон обозначила свой романтический статус как «партнерство с собой»

Psychologies
Тиндер-сюрприз Тиндер-сюрприз

Что делать, если в приложении для знакомств видишь девушку друга

GQ
Что такое прокрастинация и как с ней бороться: 12 главных правил Что такое прокрастинация и как с ней бороться: 12 главных правил

Скорее всего, ты занимаешься этим. Даже если пока не знаешь, что это такое.

Playboy
100 самых сексуальных женщин страны: 100-53 100 самых сексуальных женщин страны: 100-53

Итоговый рейтинг «100 самых сексуальных женщин страны – 2019»

Maxim
Новый вызов для поколения миллениалов Новый вызов для поколения миллениалов

Зачастую дети, родившиеся в нашем веке, не способны к самостоятельным решениям

СНОБ
Белый всадник пустыни Белый всадник пустыни

Лоуренс Аравийский – легендарный разведчик и самопровозглашенный бедуин

Maxim
7 реальных подводных городов, которые открыты для туристов (от них захватывает дух) 7 реальных подводных городов, которые открыты для туристов (от них захватывает дух)

Такое зрелище мало где увидишь!

Playboy
От советских премьеров к российским миллиардерам От советских премьеров к российским миллиардерам

Из чего вырос ресторан «Гусятникоff» братьев Ротенбергов

Forbes
Как убрать ржавчину в домашних условиях Как убрать ржавчину в домашних условиях

Как избавиться от ржавчины при помощи подручных средств

Cosmopolitan
Рыбак на краю галактики Рыбак на краю галактики

Как Геннадий Борисов открыл комету

Популярная механика
Овощи по правилам Овощи по правилам

Как лучше приготовить самые полезные для фигуры продукты

Худеем правильно
С красной строки С красной строки

Красный цвет в квартире дизайнера Мари-Кристин Фолленфант символизирует оптимизм

AD
Меняй образ жизни и худей! Правильное питание на каждый день Меняй образ жизни и худей! Правильное питание на каждый день

Как прийти к правильному питанию и составить меню на каждый день

Cosmopolitan
Красный день календаря: можно ли заниматься фитнесом во время месячных Красный день календаря: можно ли заниматься фитнесом во время месячных

Критические дни – табу или зелёный свет для занятий спортом

Cosmopolitan
Броско, но эффективно Броско, но эффективно

Дерзкое, зрелищное пространство для молодого банкира

SALON-Interior
«Триллиона просто видно не будет»: Кудрин, Орешкин и Силуанов поспорили о том, как тратить деньги «Триллиона просто видно не будет»: Кудрин, Орешкин и Силуанов поспорили о том, как тратить деньги

Российские чиновники поспорили, как лучше тратить бюджетные деньги

Forbes
«Пророк от поколения миллениалов»: как предприниматель, мечтавший стать первым триллионером, превратился в изгоя «Пророк от поколения миллениалов»: как предприниматель, мечтавший стать первым триллионером, превратился в изгоя

Rfr Адам Нойманн потерял все — бизнес, репутацию и любовь подчиненных

Forbes
«Чтобы найти время на себя, перестаньте его тратить впустую» «Чтобы найти время на себя, перестаньте его тратить впустую»

Как Анне удается съедать почти в два раза больше еды и не полнеть

Худеем правильно
11 причин, почему тебе стало скучно в браке (и как это исправить) 11 причин, почему тебе стало скучно в браке (и как это исправить)

Скука может быть почти так же опасна для брака, как и измена

Playboy
Спортсменка года: Алина Загитова Спортсменка года: Алина Загитова

Алина Загитова — лучшая российская фигуристка-одиночница

Glamour
Превышение полномочий: должна ли корпорация вмешиваться в личную жизнь сотрудников Превышение полномочий: должна ли корпорация вмешиваться в личную жизнь сотрудников

Насколько чувства могут подчиняться корпоративной культуре

Forbes
Мальчишки и девчонки, а также их родители… Мальчишки и девчонки, а также их родители…

Им прочили огромные гонорары и яркую карьеру, однако судьба распорядилась иначе

StarHit
Василий Даниловский: Василий Даниловский:

Василий Даниловский - основатель и идейный вдохновитель Roofevents

Cosmopolitan
На задворках двух империй На задворках двух империй

Как Пушкин и древнеримский поэт Овидий оказались практически в одном месте

Наука и жизнь
Открыть в приложении