Новые исследования показали, что в будущем носимые устройства, такие как smartwatches (умные часы), могут использовать ультразвуковую визуализацию для распознания жестов рук.
Исследовательская группа, под руководством профессора Майка Фрейзера, Асир Марзо и Джес Макинтош из Бристольской группы взаимодействия (BIG) в Бристольском университете, вместе с университетскими больницами Bristol NHS Foundation Trust (UH Bristol) представила свою новую работу.
Презентация состоялась на одной из самых важных конференций в мире по человеко-компьютерным интерфейсам, ACM CHI 2017, прошедшей 8-11мая в Денвере, США.
Увеличивается количество компьютеров, и носимые компьютеры, такие как smartwatches, набирают популярность. Число устройств по всему дому, таких как лампочки Wi-Fi и интеллектуальные термостаты, также возрастает. Однако нынешняя технология ограничивает возможность связи человека с этими устройствами.
Ручные жесты были предложены как интуитивно понятный и простой способ взаимодействия человека с интеллектуальными устройствами и управления ими в разных условиях. Например, жесты можно было бы использовать для тушения света в гостиной или для открытия или закрытия окна. Распознавание жестов руки могло быть достигнуто многими способами, но проблема размещение датчика является основным ограничением данного метода. Тем не менее, благодаря тому, что smartwatches становятся популярным носимым устройством, это позволит датчикам помещаться в часы, чтобы почувствовать движение руки.
Исследовательская группа предлагает ультразвуковое отображение предплечья, которое можно использовать для распознавания жестов рук. Ультразвуковая визуализация уже используется в медицине, например, сканирование на беременность. Исследователи увидели потенциал в том, чтобы использовать движение мышц и сухожилий, как способ восприятия движения рук.
Команда использовала алгоритмы обработки изображений и машинное обучение, чтобы классифицировать движение мышц как жесты. Исследователи также провели исследование пользователя, чтобы найти лучшее расположение датчиков для этой техники.
Результаты команды показали очень высокую точность распознавания, и, что важно, этот чувствительный метод хорошо работал на запястье. Что, согласитесь, идеально, поскольку позволяет в будущем комбинировать такие устройства как smartwatches с ультразвуковой техникой для распознания жестов.
Джесс Макинтош, студент PhD в отделе компьютерных наук и BIG Group, сказала: «В современных технологиях существует множество практических вопросов, которые мешают переносу небольшого портативного ультразвукового датчика изображения в интеллектуальную систему. Тем не менее, наши исследования - это первый шаг к тому, чтобы создать метод распознания жестов рук в smartwatches ».