Как Иван Пупырев разработал технологию Soli

ForbesHi-Tech

«Мне говорили, что это никогда не будет работать»: как российский инженер Google научил телефон понимать жесты

Ирина Юзбекова

mg_6963-2-1.jpg__1573649342__99631.jpg
Фото ivanpoupyrev.com

Российский инженер Иван Пупырев в 2014 году начал работать над технологией Soli, которая спустя пять лет позволила Google выпустить первый в мире смартфон, понимающий взмахи рук пользователя — Pixel 4. Forbes поговорил с изобретателем о проблемах, с которыми столкнулись создатели смартфона, о новых проектах российского изобретателя и сложностях в работе с талантливыми людьми.

15 октября 2019 года компания Google презентовала свои новые продукты, в том числе показала следующую версию своего смартфона — Pixel 4. Новинка умеет распознавать пользователя по лицу под любым углом. Кроме того, устройство получило новую технологию — Motion Sense, которая позволяет ему понимать жесты пользователя. Рядом с камерой Pixel 4 расположился мини-радар, который понимает движения рук человека без прикосновения к экрану. Над его созданием в рамках проекта Soli, основанном на технологии радарного датчика, последние пять лет работал Иван Пупырев, руководитель проектов лаборатории Google Advanced Technology and Projects (ATAP), которая занимается нестандартными разработками.

До того, как прийти в Google, Пупырев, выпускник Московского авиационного института (МАИ), успел поработать с Disney и Sony. В Disney он создал 17 интерактивных технологий, часть из которых компания задействовала в своих парках аттракционов. Самая главная из них — Touché, которая позволяла распознавать прикосновения человека к предмету, растению или даже воде.

Работая в Sony, Пупырев еще до появления первого iPhone в 2007 году, предлагал выпустить мобильный телефон с сенсорным дисплеем, но в компании не поддержали эту идею, хотя Пупырев уверен, что японская корпорация могла опередить появление iPhone. Пупырев и его коллеги из Sony придумали другой проект — Gummi. Это небольшой дисплей, на котором для перемещения объектов можно водить пальцем по оборотной стороне устройства. Sony применила технологию задней сенсорной панели на игровой консоли PlayStation Vita, которую выпустила в 2011 году.

Forbes побеседовал с инженером о невербальном взаимодействии человека с техникой, привычке людей к кнопкам, «умных куртках» и «сумасшедших идеях», которые работают.

Чем отличаются технология Soli и датчик Motion Sense в смартфоне Pixel 4?

Motion Sense – это не другая технология, это та же самая Soli. С точки зрения брендинга Pixel 4 в Google решили назвать ее Motion Sense. В телефоне у нее более узкое применение: она должна распознавать взаимодействия пользователя с телефоном. Для того, чтобы пользователю было понятнее, что это за технология, ее назвали Motion Sense.

Какой функционал Soli задействован в смартфоне?

Само по себе технология может делать много вещей. Так как она новая и была создана с нуля, мы решили ограничить ее использование. Кроме того, мы столкнулись с большим количеством технических трудностей при ее внедрении.

Сейчас технология используется для распознавания человеческих действий. Философия применения Soli в интерфейсах состоит в том, что смартфон должен понимать, что вокруг него происходит и это не должно требовать от пользователя каких-то специальных действий. Это то, что мы называем невербальное взаимодействие — без использования голоса или кнопок. Мы заинтересованы в том, чтобы телефон был умный как человек, и понимал, что происходит вокруг, понимал контекст.

Сейчас, например, в нем есть функция, которая позволяет жестом убавить звук звонящего телефона. Можно жестом отключить звонок или будильник. Это очень удобно, потому что когда в семь утра звонит будильник и ты пытаешься проснуться, тебе не надо брать телефон и нажимать какую-то кнопку – ты просто протягиваешь руку и звук отключается сам.

В Pixel 4 есть также технология идентификации пользователя по лицу. Тут всегда возникает вопрос, когда должны включаться камеры распознавания. Если они работают все время, то у вашего телефона быстро сядет батарейка. Поэтому телефон должен распознавать «знаки», которые сигнализируют о том, что пользователь намеревается использовать эту функцию. Soli позволяет нашему телефону понимать намерения. Если Pixel 4 лежит на столе, а рука пользователя протягивается к нему, в этот момент камеры уже активируются и начинают работать еще до того, как владелец поднес телефон к лицу. Эта комбинация сенсоров ускоряет процесс, и сохраняет заряд батарейки.

Последняя функция состоит в том, что когда телефон лежит на столе, а вас рядом нет, то его дисплей выключается. А когда вы подходите к телефону, он снова включается.

Сенсор может делать гораздо больше, но все эти вещи — новые для пользователя. Поэтому мы бы хотели, чтобы пользователи привыкли к тому, что есть сейчас, а потом подумаем о расширении возможностей.

С какими сложностями вы столкнулись при внедрении Soli в Pixel 4?

Внедрение любой технологии, разработанной в лаборатории, в продукт — это долгий и тяжелый процесс. Когда вы работаете над исследованием, вам надо показать, что технология работает хотя бы один раз. Когда вы работаете над продуктом, нужно показать, что технология работает всегда. Вам нужно принять во внимание огромное количество ситуаций, при которых она не будет работать. Что происходит с Soli, когда человек роняет телефон, что происходит, когда другие сенсоры включены, есть ли какое-то ненужное взаимодействие между другими сенсорами и Soli? Ни у одной компании в мире нет опыта внедрения радара в мобильный телефон. Поэтому нет никакой документации на этот счет.

Поскольку индустрия мобильных телефонов уже довольно развитая, большое количество знаний о том, как делать телефон, находится на фабриках. У фабрик, которые делают телефоны, есть много наработанных производственных технологий. Но когда они получают новую технологию, они тоже не знают, что с ней делать. Им нужно выстраивать новую продуктовую линию, тренировать операторов на фабрике, определять возникающие проблемы, потому что они еще никогда не внедряли эту технологию. Нужно учитывать огромное количество деталей, потому что, когда ты выпускаешь миллион телефонов, маленькая деталь может повлиять на тысячи людей.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

«Лейкоз — это дикий зверь»: координатор волонтеров Ольга Егорова о своей работе «Лейкоз — это дикий зверь»: координатор волонтеров Ольга Егорова о своей работе

«Если вы встретите медведя, не пытайтесь убежать – это бесполезно»

Cosmopolitan
«Буржуазность подразумевает семейные ценности»: владелец бренда Malo о медленной моде «Буржуазность подразумевает семейные ценности»: владелец бренда Malo о медленной моде

Бастиан Марио Стангони о будущем кашемировой индустрии и переменчивой моде

Forbes
10 самых щедрых компаний России. Рейтинг Forbes 10 самых щедрых компаний России. Рейтинг Forbes

Рейтинг лучших работодателей по двум параметрам — зарплата и соцобеспечение

Forbes
Чем заняться в Будапеште? Чем заняться в Будапеште?

Не самое очевидное направление для уикенда, но побывать в Будапеште точно стоит

GQ
Анна Михалкова: «Иногда развод – единственное правильное решение» Анна Михалкова: «Иногда развод – единственное правильное решение»

Анна Михалкова абсолютно естественна и в жизни, и на экране

Psychologies
Саймон Столенхаг: Байки из петли. Отрывок из книги Саймон Столенхаг: Байки из петли. Отрывок из книги

Саймон Столенхаг известен своими постапокалиптическими работами

СНОБ
Подземелья холодной войны: секретная база подводных лодок Подземелья холодной войны: секретная база подводных лодок

Место, где можно кожей ощутить масштабы гонки вооружений времен холодной войны

Популярная механика
С природой о природе С природой о природе

Основная тема интерьера — природа, вдохновляющая и умиротворяющая

SALON-Interior
Сэмюэл Литтл — самый массовый серийный убийца в истории США, обладавший феноменальной памятью — он рисовал портреты своих жертв. Рассказываем его историю Сэмюэл Литтл — самый массовый серийный убийца в истории США, обладавший феноменальной памятью — он рисовал портреты своих жертв. Рассказываем его историю

Жертвами Сэмюэла Литтла преимущественно становились наркоманки и проститутки

Esquire
Сергей Измалков: «Это точно не про колхоз» Сергей Измалков: «Это точно не про колхоз»

Сергей Измалков об экономике шеринга и тренде на совместное потребление

РБК
Муравьиная планета: как два друга из Волгограда заработали миллионы на фермах для насекомых Муравьиная планета: как два друга из Волгограда заработали миллионы на фермах для насекомых

Как детское увлечение превратилось в бизнес с миллионной выручкой

Forbes
Джеймс Клир: Как сформировать новую привычку Джеймс Клир: Как сформировать новую привычку

Как не стать жертвой собственных привычек?

СНОБ
Soundwalk Collective, Патти Смит и российский оператор Анастасия Иванова о совместном проекте The Perfect Vision Soundwalk Collective, Патти Смит и российский оператор Анастасия Иванова о совместном проекте The Perfect Vision

Что такое «идеальное видение» и при чем здесь французский поэт Артюр Рембо

Vogue
Дежавю — дар предсказания или когнитивная иллюзия? Дежавю — дар предсказания или когнитивная иллюзия?

Иногда нам кажется: мы знали, что сейчас произойдет

Psychologies
Каршеринг для новичков: что делать, когда есть права, но нет машины Каршеринг для новичков: что делать, когда есть права, но нет машины

Заменит ли каршеринг потребности водителей

Популярная механика
Чем лучше закусывать водку и чего стоит избегать: список, который нужен каждому Чем лучше закусывать водку и чего стоит избегать: список, который нужен каждому

Давай узнаем, чем правильно закусывать водку, чтобы было хорошо и приятно

Playboy
Худой психопат и толстый политик: Кристиан Бейл и все его трансформации в кино Худой психопат и толстый политик: Кристиан Бейл и все его трансформации в кино

Посмотрим, как Кристиан Бейл менялся для разных фильмов

Cosmopolitan
Карина Истомина Карина Истомина

Сердечный диджей, тонко чувствующий ритм жизни и пульс времени

Tatler
Выбери цвет волос для зелёных глаз Выбери цвет волос для зелёных глаз

Выбери оттенок волос под цвет глаз

Cosmopolitan
Лариса Лужина: «Обращусь я к друзьям» Лариса Лужина: «Обращусь я к друзьям»

Лариса Лужина отпраздновала юбилей в Доме кино

Караван историй
Алиса Хазанова: Менять отношение к правам женщин нужно не в киноиндустрии, а в реальной жизни Алиса Хазанова: Менять отношение к правам женщин нужно не в киноиндустрии, а в реальной жизни

Алиса Хазанова рассказала об отношении к смерти и о правах женщин в России

СНОБ
Инверсное мышление: как похудеть и избавиться от долгов, думая о плохом Инверсное мышление: как похудеть и избавиться от долгов, думая о плохом

Как мысленная уловка поможет избавиться от проблем и достичь целей

РБК
Лучшие советы молодым предпринимательницам от Серены Уильямс, Оливии Манн и других влиятельных женщин Лучшие советы молодым предпринимательницам от Серены Уильямс, Оливии Манн и других влиятельных женщин

Наиболее влиятельные женщины из мира бизнеса и СМИ могут многое рассказать

Forbes
Икра с огнем Икра с огнем

Где она, там праздник — если, конечно, вы не ошиблись в выборе баночки

Добрые советы
На всех скоростях На всех скоростях

Три актрисы, три главные роли в российском кинематографе и один год

Cosmopolitan
Вселенная известная и неизвестная Вселенная известная и неизвестная

Некоторые вопросы об устройстве Вселенной уже имеют ответы

Наука и жизнь
Конец конца идей: зачем читать новую книгу Джонатана Франзена Конец конца идей: зачем читать новую книгу Джонатана Франзена

Чему писатель-бумер может научить читателей-миллениалов

РБК
Дети становятся подростками: как меняется тело и... душа Дети становятся подростками: как меняется тело и... душа

Как родители могут подготовить своих детей к телесному взрослению?

Psychologies
Когда патриотизм превращается в коллективный нарциссизм? Когда патриотизм превращается в коллективный нарциссизм?

Что такое коллективный нарциссизм?

Psychologies
Суровые сказки севера Суровые сказки севера

Теплое море экзотических стран мы променяли на ветра Северной Норвегии

Лиза
Открыть в приложении