Как Иван Пупырев разработал технологию Soli

ForbesHi-Tech

«Мне говорили, что это никогда не будет работать»: как российский инженер Google научил телефон понимать жесты

Ирина Юзбекова

mg_6963-2-1.jpg__1573649342__99631.jpg
Фото ivanpoupyrev.com

Российский инженер Иван Пупырев в 2014 году начал работать над технологией Soli, которая спустя пять лет позволила Google выпустить первый в мире смартфон, понимающий взмахи рук пользователя — Pixel 4. Forbes поговорил с изобретателем о проблемах, с которыми столкнулись создатели смартфона, о новых проектах российского изобретателя и сложностях в работе с талантливыми людьми.

15 октября 2019 года компания Google презентовала свои новые продукты, в том числе показала следующую версию своего смартфона — Pixel 4. Новинка умеет распознавать пользователя по лицу под любым углом. Кроме того, устройство получило новую технологию — Motion Sense, которая позволяет ему понимать жесты пользователя. Рядом с камерой Pixel 4 расположился мини-радар, который понимает движения рук человека без прикосновения к экрану. Над его созданием в рамках проекта Soli, основанном на технологии радарного датчика, последние пять лет работал Иван Пупырев, руководитель проектов лаборатории Google Advanced Technology and Projects (ATAP), которая занимается нестандартными разработками.

До того, как прийти в Google, Пупырев, выпускник Московского авиационного института (МАИ), успел поработать с Disney и Sony. В Disney он создал 17 интерактивных технологий, часть из которых компания задействовала в своих парках аттракционов. Самая главная из них — Touché, которая позволяла распознавать прикосновения человека к предмету, растению или даже воде.

Работая в Sony, Пупырев еще до появления первого iPhone в 2007 году, предлагал выпустить мобильный телефон с сенсорным дисплеем, но в компании не поддержали эту идею, хотя Пупырев уверен, что японская корпорация могла опередить появление iPhone. Пупырев и его коллеги из Sony придумали другой проект — Gummi. Это небольшой дисплей, на котором для перемещения объектов можно водить пальцем по оборотной стороне устройства. Sony применила технологию задней сенсорной панели на игровой консоли PlayStation Vita, которую выпустила в 2011 году.

Forbes побеседовал с инженером о невербальном взаимодействии человека с техникой, привычке людей к кнопкам, «умных куртках» и «сумасшедших идеях», которые работают.

Чем отличаются технология Soli и датчик Motion Sense в смартфоне Pixel 4?

Motion Sense – это не другая технология, это та же самая Soli. С точки зрения брендинга Pixel 4 в Google решили назвать ее Motion Sense. В телефоне у нее более узкое применение: она должна распознавать взаимодействия пользователя с телефоном. Для того, чтобы пользователю было понятнее, что это за технология, ее назвали Motion Sense.

Какой функционал Soli задействован в смартфоне?

Само по себе технология может делать много вещей. Так как она новая и была создана с нуля, мы решили ограничить ее использование. Кроме того, мы столкнулись с большим количеством технических трудностей при ее внедрении.

Сейчас технология используется для распознавания человеческих действий. Философия применения Soli в интерфейсах состоит в том, что смартфон должен понимать, что вокруг него происходит и это не должно требовать от пользователя каких-то специальных действий. Это то, что мы называем невербальное взаимодействие — без использования голоса или кнопок. Мы заинтересованы в том, чтобы телефон был умный как человек, и понимал, что происходит вокруг, понимал контекст.

Сейчас, например, в нем есть функция, которая позволяет жестом убавить звук звонящего телефона. Можно жестом отключить звонок или будильник. Это очень удобно, потому что когда в семь утра звонит будильник и ты пытаешься проснуться, тебе не надо брать телефон и нажимать какую-то кнопку – ты просто протягиваешь руку и звук отключается сам.

В Pixel 4 есть также технология идентификации пользователя по лицу. Тут всегда возникает вопрос, когда должны включаться камеры распознавания. Если они работают все время, то у вашего телефона быстро сядет батарейка. Поэтому телефон должен распознавать «знаки», которые сигнализируют о том, что пользователь намеревается использовать эту функцию. Soli позволяет нашему телефону понимать намерения. Если Pixel 4 лежит на столе, а рука пользователя протягивается к нему, в этот момент камеры уже активируются и начинают работать еще до того, как владелец поднес телефон к лицу. Эта комбинация сенсоров ускоряет процесс, и сохраняет заряд батарейки.

Последняя функция состоит в том, что когда телефон лежит на столе, а вас рядом нет, то его дисплей выключается. А когда вы подходите к телефону, он снова включается.

Сенсор может делать гораздо больше, но все эти вещи — новые для пользователя. Поэтому мы бы хотели, чтобы пользователи привыкли к тому, что есть сейчас, а потом подумаем о расширении возможностей.

С какими сложностями вы столкнулись при внедрении Soli в Pixel 4?

Внедрение любой технологии, разработанной в лаборатории, в продукт — это долгий и тяжелый процесс. Когда вы работаете над исследованием, вам надо показать, что технология работает хотя бы один раз. Когда вы работаете над продуктом, нужно показать, что технология работает всегда. Вам нужно принять во внимание огромное количество ситуаций, при которых она не будет работать. Что происходит с Soli, когда человек роняет телефон, что происходит, когда другие сенсоры включены, есть ли какое-то ненужное взаимодействие между другими сенсорами и Soli? Ни у одной компании в мире нет опыта внедрения радара в мобильный телефон. Поэтому нет никакой документации на этот счет.

Поскольку индустрия мобильных телефонов уже довольно развитая, большое количество знаний о том, как делать телефон, находится на фабриках. У фабрик, которые делают телефоны, есть много наработанных производственных технологий. Но когда они получают новую технологию, они тоже не знают, что с ней делать. Им нужно выстраивать новую продуктовую линию, тренировать операторов на фабрике, определять возникающие проблемы, потому что они еще никогда не внедряли эту технологию. Нужно учитывать огромное количество деталей, потому что, когда ты выпускаешь миллион телефонов, маленькая деталь может повлиять на тысячи людей.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Календарь переверну Календарь переверну

Традиционный большой гороскоп на год: узнай, что ждет тебя в 2020-м!

Cosmopolitan
Дай лапу! Дай лапу!

Ветеринар, спасавший животных, рассказал о звонке Эдгарда Запашного

StarHit
Киноэкскурсии: 10 интересных мест для любителей кино Киноэкскурсии: 10 интересных мест для любителей кино

Где посмотреть дом Люка Скайуокера и куда отправиться на поиски Грааля?

РБК
Главная школа стартапера: миллиардер Дэвид Даффилд об опыте, который нужен успешному предпринимателю Главная школа стартапера: миллиардер Дэвид Даффилд об опыте, который нужен успешному предпринимателю

Чему может научить предпринимателя большая компания?

Forbes
Выиграть всухую Выиграть всухую

Какие ошибки в уходе могут усиливать сухость кожи

Лиза
«Марафон продолжается»: почему после смерти рэпер Нипси Хассл начал зарабатывать больше, чем при жизни «Марафон продолжается»: почему после смерти рэпер Нипси Хассл начал зарабатывать больше, чем при жизни

Музыка и бизнес-проекты Нипси продолжают работать и после его смерти

Forbes
Важные мелочи: 20 полезных лайфхаков для работы в Google Docs Важные мелочи: 20 полезных лайфхаков для работы в Google Docs

Google Docs может стать ещё комфортнее с полезными трюками

Популярная механика
Чтение выходного дня: отрывок из новой книги экономиста Адама Туза о том, как десятилетие экономических кризисов сделало наш мир таким, какой он есть Чтение выходного дня: отрывок из новой книги экономиста Адама Туза о том, как десятилетие экономических кризисов сделало наш мир таким, какой он есть

Как экономические кризисы изменили наш мир и при чем тут Трамп

Esquire
Театральный домовой Театральный домовой

Ингеборга Дапкунайте живет в невероятно активном ритме

OK!
Четвертый — крайний? Чего ждать от саммита в нормандском формате Четвертый — крайний? Чего ждать от саммита в нормандском формате

Украина наконец-то дождалась проведения очередного раунда саммита

СНОБ
Постельные сцены Постельные сцены

Эти полезные факты о сне сделают ваши ночи комфортнее, а жизнь спокойнее

Добрые советы
Нечего надеть: как отсутствие подходящих скафандров на полгода отсрочило «женский» выход в космос Нечего надеть: как отсутствие подходящих скафандров на полгода отсрочило «женский» выход в космос

Эмансипация давно преодолела пределы земного тяготения

Forbes
Кто кому Вуди: разбираемся в сексуальных скандалах с режиссером Вуди Алленом Кто кому Вуди: разбираемся в сексуальных скандалах с режиссером Вуди Алленом

Знаменитый режиссер Вуди Аллен уже не первый год подвергается нападкам прессы

Cosmopolitan
А ну-ка, давай-ка! А ну-ка, давай-ка!

Как не только не разориться на праздниках, но и неплохо заработать?

Cosmopolitan
Колонка Esquire: Андрей Подшибякин — о том, что одиночество — вовсе не сволочь Колонка Esquire: Андрей Подшибякин — о том, что одиночество — вовсе не сволочь

Одинокие люди способны быть счастливы и полноценны без пары

Esquire
Как правильно довести жену до оргазма: 7 проверенных шагов к успеху Как правильно довести жену до оргазма: 7 проверенных шагов к успеху

Простые подсказки на вес золота

Playboy
Ругайтесь на здоровье: пары, которые спорят, дольше живут Ругайтесь на здоровье: пары, которые спорят, дольше живут

Мужья и жены, которые спорят до хрипоты, живут дольше тех, кто подавляет гнев

Psychologies
Террор в нашей памяти: что российское общество хочет помнить о своих травмах Террор в нашей памяти: что российское общество хочет помнить о своих травмах

Как российское общество намерено обращаться с собственным тяжелым прошлым?

СНОБ
«Думал, обману систему». Пользователи каршеринга о неудачных поездках «Думал, обману систему». Пользователи каршеринга о неудачных поездках

Почему люди садятся в чужие автомобили и как лишиться транспорта из-за экономии

РБК
Бездушный рекрутер: как «продать» себя на собеседовании с роботом Бездушный рекрутер: как «продать» себя на собеседовании с роботом

Что нужно знать кандидатам, готовясь к собеседованию с роботом?

Forbes
Они - легенда Они - легенда

Кристиан Бейл и Мэтт Дэймон о биографическом фильме «Ford против Ferrari»

OK!
Тимоти Шаламе: «Главное – оставаться самим собой» Тимоти Шаламе: «Главное – оставаться самим собой»

Тимоти Шаламе – о взрослении, актерских принципах и ностальгии

Cosmopolitan
Что такое фишинг и чем он опасен Что такое фишинг и чем он опасен

Почему не стоит доверять письмам из рассылок

СНОБ
Может, пора сворачивать? Может, пора сворачивать?

Президент Cognitive Technologies говорит о перспективах беспилотного вождения

4x4 Club
Неронные связи: 7 мифов о римском императоре Неронные связи: 7 мифов о римском императоре

Правда и мифы о римском императоре Нероне

Вокруг света
30 мелочей, которые портят впечатление о мужчине 30 мелочей, которые портят впечатление о мужчине

Почему свидание с Прекрасным Принцем тебе категорически не понравилось

Cosmopolitan
Живете только ради выходных? Это признак эмоционального выгорания Живете только ради выходных? Это признак эмоционального выгорания

Почему возникает эмоциональное выгорание и как выйти из этого состояния?

Psychologies
Сны Софьи Павловны Сны Софьи Павловны

Софья Эрнст рассказала о том, каково быть женой гендиректора Первого канала

Tatler
Стабилизатор напряжения для газового котла: какой купить для дома? Стабилизатор напряжения для газового котла: какой купить для дома?

Какой стабилизатор напряжения выбрать для газового котла

CHIP
Каста здесь Каста здесь

Некоторые соображения об устройстве российского общества

Esquire
Открыть в приложении