Kravtsov Leonid's profile

Smart Glasses User interfaces

Этот проект был выполнен для второго тура соревнований от Ситимобил
Задание:
Наступил 2035 год. Голосовые помощники совершили скачок в развитии. Во многих сложных устройствах голосовое управление смешалось c основным интерфейсом. Беспилотные автомобили стали привычным делом, ездят по выделенным линиям. У них есть свои плюсы и минусы — как и у всего. Когда вы заказываете такси, то выбираете, с водителем оно будет или без. Как и у большинства людей, у вас есть специальные очки — одно из основных устройств для взаимодействия с окружающим миром. Они управляются голосом, движениями глаз или жестами, умеют подстраиваться под яркость среды, безопасны, допускают постоянное ношение. В очки перенесены все основные сервисы, в том числе, заказ такси. Как будет выглядеть в этих очках экран с назначенным такси, которое едет к вам? Результат ждём в виде изображения интерфейса, наложенного на среду. На странице в Notion опишите его и поясните, как происходит взаимодействие пользователя с этим интерфейсом. Отправьте свою работу в ответ на письмо, в котором мы поздравили вас с прохождением во второй тур.
Сбер и 2Gis создали свой AR kit, благодаря которому изменили отношение пользователей к дополненой реальности, по крупным городам появились Сбер-Коды, благодаря которым малый бизнес и сфера услуг начали прогрессивно расти. Пользователи все чаще оставляют свои телефоны дома, потому что пользоваться приложениями и расплачиваться стало удобнее прямо с очков Sber Glasses, которые сканируют сетчатку глаза и предоставляют точные биометрические данные.
Интерфейс очков:
Интерфейс очков
1. При помощи голосового помощника.
Голосовое управление удобно, когда мы едем куда-нибудь в машине или торопимся и не можем использовать жесты или движение глаз.

У пользователя есть выбор как активировать голосового помощника:
зажать кнопку включения;
нажать на иконку голосового помощника в доке;
сказать "привет, Афина"; 

Это нужно, потому что не всегда происходит распознавание голоса, особенно в шумных местах. Так мы сможем дать пользователю уверенность в том, что голосовой помощник точно активирован.
После активации Афина, на основе того, что пользователь сказал, слева составляет предложение и добавляет кнопку, которая меняется в зависимости от контекста предложения.​​​​​​​
2. При помощи жестов.
Для того, чтобы активировать жест – его нужно повторить два раза. Очки будут поддерживать распознавание до 10 пальцев. Благодаря собственному AR kit можно будет менять положение проекций интерфейса в пространстве или проецировать его на определенную плоскость.
Также с помощью распознавания пальцев рук мы сможем управлять интерфейсами и использовать палец как курсор.
3. При помощи носимых гаджетов.
Я уверен, что к 2035 году носимой электроники станет еще больше, чем есть сейчас. Будет классно, если у нас получится делать пары из AR очков и Smart часов. Взаимодействие будет удобным, быстрым и бесшумным.
4. При помощи глаз.
Для того, чтобы активировать режим управления очками с помощью глаз – нужно три раза моргнуть. Чтобы запустить приложение и подтвердить свой выбор – два раза моргнуть, смотря на иконку или кнопку.
В SberGlasses будут сканеры, которые смогут очень качественно сканировать сетчатку пользователей. Это нужно как для навигации по интерфейсам, так и для совершения транзакций с помощью очков.
Глазами удобно управлять при серфинге страниц в интернете, при просмотре фильмов.
Но не всегда можно пользоваться голосовым управлением, не всегда можно пользоваться жестами, не всегда мы можем управлять интерфейсом глазами. 

Я предлагаю улучшить существующие идеи по поводу пользовательского опыта и добавить всего два элемента управления в очки будущего, пускай это не так футуристично, но будет удобно:
Кнопка включения 
Она нужна для включения устройства, также для того, чтобы совершать транзакции и переходить в ранее открытые приложения.
Крутилка - кнопка – "Sber turn" 
Она нужна для выбора приложения, навигации по библиотекам и функциям, а также для того, чтобы читать нужную информацию, приближать и отдалять объекты. Сделать музыку погромче.
Особенно это будет актуально для тех, кто собирается пользоваться одними очками в качестве заменителя для всех его умных гаджетов. Удобно заряжать и пользоваться только одним девайсом.


1. Использование очков дома или на учёбе.
Когда мы дома – мы потребляем много контента, поэтому в этом режиме очков перед нами много информации и несколько рабочих столов. AR очки – это не только девайс для навигации или помощи, но и также девайс для развлечения. Согласитесь, что классно было бы смотреть Okko на гиганском экране, с приглушенным и заблюренным светом. + мы даем пользователям свободу в кастомизации интерфейсов. Пользователь выбирает как проецировать, размер проекций, растояние между проекциями и тд. для того, чтобы было комфортно пользоваться.
2. Режим "За рулём".
Использование очков за рулём или при спешке. Здесь гораздо меньше информации, меньше кастомизации. Но все сделано для того, чтобы не отвлекаться на лишние элементы. При желании пользователь может оставить только уведомления и нижний докбар.
Но есть одна главная проблема AR очков – маленькая батарея.
Как можно решить эту проблему и упростить пользовательский опыт?
3. Режим "Штрих-Код".
Сбер – единственная IT компания в России, которая сможет разместить свои Сбер-коды по городам для управления умными очками. В этом режиме очки находятся в спящем режиме. Ничего не проецируется до того момента, как улучшенные сканеры Lidar не распознают один из ближайших по видимости Сбер-Кода.
И с помощью кнопки или подтверждения жестом, глазами – можно ознакомиться с информацией, которую несет Сбер-Код.
Помогаем с взаимодействием при заказе такси.
Каждый из нас сталкивался с проблемой, когда вокруг нас находится множество такси и не понятно какое из такси именно наше. Особенно, когда не хочется лезть в карман за телефоном, чтобы посмотреть марку машины или госномер.
В будущем ничего не нужно запоминать, потому что придут Сбер-Коды, которые будут распространены по всему городу для взаимодействия с услугами и предложениями.
Например: приехала машина, на ней изображен Сбер-Код, который считывают мои очки и на линзы выводится информация, что это именно моё такси. Тем более это будет полезно в будущем, когда не будет водителей, у которых всегда можно было вежливо спросить и уточнить, а точно ли это то такси, которое я вызвал.
Ведь в большинстве случаев по городу будут ездить беспилотники.
Помогаем бизнесу и людям.
Также с помомощью Сбер-Кодов можно помогать бизнесу. Например мы сможем размещать вместо вывесок по городу– Сбер-Кода, которые будут нести в себе полезную информацию. Так пользователям будет проще взаимодействовать с предложениями, которые предлагает тот или иной магазин. + мы сможем наглядно продемонстрировать пользователям пользу сервисов Сбера, которые могут помочь с доставкой или с другой услугой.
Процесс заказа и ожидания такси:
3. Выводим экран с ожиданием такси на главный экран очков.
4. Готово, экран с режимом ожидания выведен на главный экран очков.
Если нам необходимо переключить режим очков – мы можем это сделать, тогда выведенный экран уменьшиться до такого размера, чтобы не мешать движению пользователя.

Есть хорошая фраза, которую Стив Джобс сказал Уэйну Гретцки: "Твое отличие от всех хоккеистов в том, что все хоккеисты бегут туда, где шайба лежит, а ты едешь туда, где она будет лежать."

Где будет лежать шайба в 2035 году?
Что если в 2035 году будут люди с вживленным в мозг чипом? Даже если их будет всего всего 1% от всех людей. Пользовательский опыт и взаимодействие с устройствами в корне поменяется. Не нужны будут жесты, свайпы, движения глаз и рук, физические кнопки. Только сила мысли человека.
Как я себе это представляю? Чипу и электронным сетям, проложенным в мозгу человека, необходим источник питания + вывод данных о том, что происходит с проведенными сетями. К тому же нужен порт для того, чтобы управлять этими сетями и контролировать эти процессы.
Поэтому хаб для управления я решил разместить под ухом, прям как в фильме Kingsman, только эти чипы будут безопаснее:) Когда мы надеваем AR очки они сопрягаются с электронными сетями при помощи беспроводного подключения к хабу под ухом.
Так мы получаем интересную связку между мыслями и желаниями человека и спроецированными интерфейсами в его AR очках.
Ссылка на Figma: https://www.figma.com/file/mYVSkZPnQBtmlsLVBObGSO/%D0%92%D1%82%D0%BE%D1%80%D0%BE%D0%B9-%D1%82%D1%83%D1%80-%D0%9A%D1%80%D0%B0%D0%B2%D1%86%D0%BE%D0%B2-%D0%9B%D0%B5%D0%BE%D0%BD%D0%B8%D0%B4?node-id=0%3A1
Smart Glasses User interfaces
Published:

Smart Glasses User interfaces

Published: