Как Иван Пупырев разработал технологию Soli

ForbesHi-Tech

«Мне говорили, что это никогда не будет работать»: как российский инженер Google научил телефон понимать жесты

Ирина Юзбекова

mg_6963-2-1.jpg__1573649342__99631.jpg
Фото ivanpoupyrev.com

Российский инженер Иван Пупырев в 2014 году начал работать над технологией Soli, которая спустя пять лет позволила Google выпустить первый в мире смартфон, понимающий взмахи рук пользователя — Pixel 4. Forbes поговорил с изобретателем о проблемах, с которыми столкнулись создатели смартфона, о новых проектах российского изобретателя и сложностях в работе с талантливыми людьми.

15 октября 2019 года компания Google презентовала свои новые продукты, в том числе показала следующую версию своего смартфона — Pixel 4. Новинка умеет распознавать пользователя по лицу под любым углом. Кроме того, устройство получило новую технологию — Motion Sense, которая позволяет ему понимать жесты пользователя. Рядом с камерой Pixel 4 расположился мини-радар, который понимает движения рук человека без прикосновения к экрану. Над его созданием в рамках проекта Soli, основанном на технологии радарного датчика, последние пять лет работал Иван Пупырев, руководитель проектов лаборатории Google Advanced Technology and Projects (ATAP), которая занимается нестандартными разработками.

До того, как прийти в Google, Пупырев, выпускник Московского авиационного института (МАИ), успел поработать с Disney и Sony. В Disney он создал 17 интерактивных технологий, часть из которых компания задействовала в своих парках аттракционов. Самая главная из них — Touché, которая позволяла распознавать прикосновения человека к предмету, растению или даже воде.

Работая в Sony, Пупырев еще до появления первого iPhone в 2007 году, предлагал выпустить мобильный телефон с сенсорным дисплеем, но в компании не поддержали эту идею, хотя Пупырев уверен, что японская корпорация могла опередить появление iPhone. Пупырев и его коллеги из Sony придумали другой проект — Gummi. Это небольшой дисплей, на котором для перемещения объектов можно водить пальцем по оборотной стороне устройства. Sony применила технологию задней сенсорной панели на игровой консоли PlayStation Vita, которую выпустила в 2011 году.

Forbes побеседовал с инженером о невербальном взаимодействии человека с техникой, привычке людей к кнопкам, «умных куртках» и «сумасшедших идеях», которые работают.

Чем отличаются технология Soli и датчик Motion Sense в смартфоне Pixel 4?

Motion Sense – это не другая технология, это та же самая Soli. С точки зрения брендинга Pixel 4 в Google решили назвать ее Motion Sense. В телефоне у нее более узкое применение: она должна распознавать взаимодействия пользователя с телефоном. Для того, чтобы пользователю было понятнее, что это за технология, ее назвали Motion Sense.

Какой функционал Soli задействован в смартфоне?

Само по себе технология может делать много вещей. Так как она новая и была создана с нуля, мы решили ограничить ее использование. Кроме того, мы столкнулись с большим количеством технических трудностей при ее внедрении.

Сейчас технология используется для распознавания человеческих действий. Философия применения Soli в интерфейсах состоит в том, что смартфон должен понимать, что вокруг него происходит и это не должно требовать от пользователя каких-то специальных действий. Это то, что мы называем невербальное взаимодействие — без использования голоса или кнопок. Мы заинтересованы в том, чтобы телефон был умный как человек, и понимал, что происходит вокруг, понимал контекст.

Сейчас, например, в нем есть функция, которая позволяет жестом убавить звук звонящего телефона. Можно жестом отключить звонок или будильник. Это очень удобно, потому что когда в семь утра звонит будильник и ты пытаешься проснуться, тебе не надо брать телефон и нажимать какую-то кнопку – ты просто протягиваешь руку и звук отключается сам.

В Pixel 4 есть также технология идентификации пользователя по лицу. Тут всегда возникает вопрос, когда должны включаться камеры распознавания. Если они работают все время, то у вашего телефона быстро сядет батарейка. Поэтому телефон должен распознавать «знаки», которые сигнализируют о том, что пользователь намеревается использовать эту функцию. Soli позволяет нашему телефону понимать намерения. Если Pixel 4 лежит на столе, а рука пользователя протягивается к нему, в этот момент камеры уже активируются и начинают работать еще до того, как владелец поднес телефон к лицу. Эта комбинация сенсоров ускоряет процесс, и сохраняет заряд батарейки.

Последняя функция состоит в том, что когда телефон лежит на столе, а вас рядом нет, то его дисплей выключается. А когда вы подходите к телефону, он снова включается.

Сенсор может делать гораздо больше, но все эти вещи — новые для пользователя. Поэтому мы бы хотели, чтобы пользователи привыкли к тому, что есть сейчас, а потом подумаем о расширении возможностей.

С какими сложностями вы столкнулись при внедрении Soli в Pixel 4?

Внедрение любой технологии, разработанной в лаборатории, в продукт — это долгий и тяжелый процесс. Когда вы работаете над исследованием, вам надо показать, что технология работает хотя бы один раз. Когда вы работаете над продуктом, нужно показать, что технология работает всегда. Вам нужно принять во внимание огромное количество ситуаций, при которых она не будет работать. Что происходит с Soli, когда человек роняет телефон, что происходит, когда другие сенсоры включены, есть ли какое-то ненужное взаимодействие между другими сенсорами и Soli? Ни у одной компании в мире нет опыта внедрения радара в мобильный телефон. Поэтому нет никакой документации на этот счет.

Поскольку индустрия мобильных телефонов уже довольно развитая, большое количество знаний о том, как делать телефон, находится на фабриках. У фабрик, которые делают телефоны, есть много наработанных производственных технологий. Но когда они получают новую технологию, они тоже не знают, что с ней делать. Им нужно выстраивать новую продуктовую линию, тренировать операторов на фабрике, определять возникающие проблемы, потому что они еще никогда не внедряли эту технологию. Нужно учитывать огромное количество деталей, потому что, когда ты выпускаешь миллион телефонов, маленькая деталь может повлиять на тысячи людей.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Источники питания Источники питания

Лучшие локации для отдыха и лечения на курортах Кавказских Минеральных Вод

Добрые советы
Можно ли в грозу разговаривать по телефону? Можно ли в грозу разговаривать по телефону?

Правда ли, что работающий мобильник «притягивает» молнии

CHIP
Самодиагностика: как научиться чувствовать свое тело Самодиагностика: как научиться чувствовать свое тело

Зачем нам нужен навык чувствовать, что происходит в теле

Psychologies
Они это серьезно? Главные “Шнобелевки“ 2019 года Они это серьезно? Главные “Шнобелевки“ 2019 года

Работы, которые «заставляют сперва рассмеяться, а потом – задуматься»

Популярная механика
Выжжет глаза и отслоится роговица: 10 мифов о лазерной коррекции зрения Выжжет глаза и отслоится роговица: 10 мифов о лазерной коррекции зрения

Распространённые мифы о лазерной коррекции зрения

Cosmopolitan
Голливудская стройность: щелочная диета для похудения, меню на неделю Голливудская стройность: щелочная диета для похудения, меню на неделю

Секрет вечной молодости мировых звёзд

Cosmopolitan
«Дорогие штучки» с Тиной Канделаки: десять самых роскошных самолетов россиян «Дорогие штучки» с Тиной Канделаки: десять самых роскошных самолетов россиян

На каких самолетах летают российские миллиардеры?

Forbes
Новый вызов для миллениалов. Итоги мозгового штурма Новый вызов для миллениалов. Итоги мозгового штурма

Что делать, если вы или ваш ребенок лежит на диване и ничего не хочет делать?

СНОБ
Счастлив вместе Счастлив вместе

Ральф Лорен рассказывает о том, как его модная империя строилась на любви

Vogue
Страх полетов: иногда это не то, чем кажется Страх полетов: иногда это не то, чем кажется

То, что мы называем аэрофобией, может быть проявлением разных состояний

Psychologies
«Я не трус, но я боюсь»: победить свои страхи «Я не трус, но я боюсь»: победить свои страхи

Иногда страх выходит из-под контроля и приобретает над нами абсолютную власть

Psychologies
Препарат на миллиард: кто зарабатывает на порошке, который рекламируют Сергей Шнуров и Ксения Собчак Препарат на миллиард: кто зарабатывает на порошке, который рекламируют Сергей Шнуров и Ксения Собчак

Андрей Попилов привез в Россию рецепт сорбента «Полисорб» из Украины

Forbes
Искусство как приём Искусство как приём

Интерьер, выстроенный вокруг предметов искусств, сам стал произведением

SALON-Interior
Звонок не для учителя: как новые технологии разрушают стереотипы о школьном образовании Звонок не для учителя: как новые технологии разрушают стереотипы о школьном образовании

В ближайшие годы объем мирового рынка образования увеличится до $6-7 трлн

Forbes
Чем лучше закусывать водку и чего стоит избегать: список, который нужен каждому Чем лучше закусывать водку и чего стоит избегать: список, который нужен каждому

Давай узнаем, чем правильно закусывать водку, чтобы было хорошо и приятно

Playboy
Как правильно курить сигару: понятный гид и главные нюансы Как правильно курить сигару: понятный гид и главные нюансы

В первый раз зажигание сигары может показаться довольно запутанным

Playboy
Восток и его обитатели Восток и его обитатели

В озере Восток под ледовым щитом Антарктиды есть жизнь

Популярная механика
Ретушь в 20 веке: как раньше актрисы увеличивали глаза и убирали несовершенства Ретушь в 20 веке: как раньше актрисы увеличивали глаза и убирали несовершенства

Как меняли свой облик актрисы 100 лет назад?

Cosmopolitan
Белый всадник пустыни Белый всадник пустыни

Лоуренс Аравийский – легендарный разведчик и самопровозглашенный бедуин

Maxim
Скоростной режим: как научиться быстро печатать на клавиатуре Скоростной режим: как научиться быстро печатать на клавиатуре

Лайфхаки, которые помогут научиться быстро набирать тексты на клавиатуре

Cosmopolitan
Новый эксперимент над водителями: в патрульных машинах установят камеры Новый эксперимент над водителями: в патрульных машинах установят камеры

Московские власти и столичная ГИБДД начнут тестировать новые мобильные камеры

РБК
«Еще один налог на предпринимателей»: как «суверенный интернет» изменит жизнь российского бизнеса «Еще один налог на предпринимателей»: как «суверенный интернет» изменит жизнь российского бизнеса

Как риск отключения от глобального интернета влияет на российский бизнес?

Forbes
Сила воли... и скальпель: как я похудела на 60 кило после уменьшения желудка Сила воли... и скальпель: как я похудела на 60 кило после уменьшения желудка

Наша героиня решила вопрос с лишним весом с помощью хирургической операции

Cosmopolitan
6 невинных привычек, которые раздражают окружающих (пора с ними попрощаться) 6 невинных привычек, которые раздражают окружающих (пора с ними попрощаться)

Эти вредные привычки кажутся невинными, но раздражают окружающих

Playboy
Лимонов дает пощечину общественному вкусу Лимонов дает пощечину общественному вкусу

Инвестор Сергей Лимонов поддерживает бунтарей

Собака.ru
Новая Skoda Octavia для России: техника, опции, дата продаж Новая Skoda Octavia для России: техника, опции, дата продаж

Чем удивила Octavia четвертого поколения

РБК
Что помнят и чувствуют белухи Что помнят и чувствуют белухи

Иван Затевахин об агрессии, манипуляции и доброте в мире людей и животных

Русский репортер
Полный пенсион: как петербурженка открыла сеть бесплатных кафе для пожилых людей Полный пенсион: как петербурженка открыла сеть бесплатных кафе для пожилых людей

Из проекта «Чешский домик» Александры Синяк выросла сеть благотворительных кафе

Forbes
100 самых сексуальных женщин страны: 100-53 100 самых сексуальных женщин страны: 100-53

Итоговый рейтинг «100 самых сексуальных женщин страны – 2019»

Maxim
«Свинг укрепил мои отношения с мужем»: откровенная история одной пары «Свинг укрепил мои отношения с мужем»: откровенная история одной пары

Алена и ее муж Саша вместе уже 11 лет, у них есть дети, работа и маленькая тайна

Cosmopolitan
Открыть в приложении