Далее, по словам исследователей Вашингтонского университета, появится возможность взаимодействовать с нашими устройствами не только с помощью сенсорных экранов, но и с помощью жестов в пространстве вокруг телефона. Некоторые смартфоны начинают включать трехмерное распознавание жестов на основе, например, камер, но камеры потребляют значительный заряд батареи и требуют четкого обзора рук пользователя.
Инженеры UW разработали новую форму технологии беспроводного зондирования с низким энергопотреблением, которая вскоре может внести свой вклад в эту растущую область, позволяя пользователям «обучать» свои смартфоны распознавать определенные жесты рук рядом с телефоном и реагировать на них.
Эта технология, разработанная в лабораториях Мэтта Рейнольдса и Светака Пателя, доцентов электротехники, информатики и инженерии из Университета штата Вашингтон, использует беспроводную передачу телефона для распознавания жестов поблизости, поэтому она работает, когда устройство находится вне поля зрения. карман или сумку и может быть легко встроена в будущие смартфоны и планшеты.
«В современные смартфоны встроено множество различных датчиков, от камер до акселерометров и гироскопов, которые могут отслеживать движение самого телефона», – сказал Рейнольдс. «Мы разработали новый тип датчика, который использует отражение собственных беспроводных сигналов телефона для распознавания жестов поблизости, позволяя пользователям взаимодействовать со своими телефонами, даже когда они не держат телефон в руках, не смотрят на дисплей или не касаются экрана."
Члены команды представят свой проект под названием SideSwipe и соответствующий доклад. Октябрь.
8 на симпозиуме Ассоциации вычислительной техники по программному обеспечению и технологиям пользовательского интерфейса в Гонолулу.
Когда человек звонит или приложение обменивается данными с Интернетом, телефон передает радиосигналы в сотовой сети 2G, 3G или 4G для связи с базовой станцией сотовой связи.
Когда рука пользователя перемещается в пространстве рядом с телефоном, тело пользователя отражает часть передаваемого сигнала обратно в сторону телефона.
В новой системе используется несколько небольших антенн для захвата изменений отраженного сигнала и классификации изменений для определения типа выполняемого жеста.
Таким образом, касание, наведение и скользящие жесты могут соответствовать различным командам для телефона, таким как отключение звука звонка, изменение воспроизводимой песни или отключение громкой связи. Поскольку беспроводная связь телефона легко проходит через ткань одежды или сумочки, система работает, даже когда телефон убран.
«Такой подход позволяет нам превратить все пространство вокруг телефона в пространство взаимодействия, выходящее за рамки типичного интерфейса сенсорного экрана», – сказал Патель. "Вы можете взаимодействовать с телефоном, даже не видя дисплея, используя жесты в трехмерном пространстве вокруг телефона."
Группа из 10 участников исследования протестировала технологию, выполнив 14 различных жестов руками, включая наведение, скольжение и касание, в различных положениях вокруг смартфона.
Каждый раз телефон калибровался, изучая движения рук пользователя, а затем обучался реагировать. Команда обнаружила, что смартфон распознает жесты с точностью около 87 процентов.
Существуют и другие технологии на основе жестов, такие как AllSee и WiSee, недавно разработанные в UW, но исследователи говорят, что у нового подхода есть важные преимущества.
«Подход направленной антенны SideSwipe делает взаимодействие с телефоном полностью автономным, потому что вы не зависите ни от чего в окружающей среде, кроме собственных передач телефона», – сказал Рейнольдс. «Поскольку датчик SideSwipe основан только на маломощных приемниках и относительно простой обработке сигнала по сравнению с видео с камеры, мы ожидаем, что SideSwipe будет иметь минимальное влияние на время автономной работы."
Команда зарегистрировала патенты на эту технологию и продолжит разработку SideSwipe, интегрируя оборудование и создавая устройство "plug and play", которое можно было бы встроить в смартфоны, – сказал Чэнь Чжао, руководитель проекта и докторант UW в области электротехники.
Другими соавторами являются Ке-Ю Чен, докторант UW в области электротехники, и М. Д. Танвир Ислам Ауми, докторант в области компьютерных наук и инженерии.
Это исследование финансировалось UW.
Видео проекта: http: // youtu.be / KN3GWZ8pt4w