Ты когда-нибудь ходил менять канал, потом понял, что твой пульт упал за диван? Или хотели пролистать рецепт на планшете, но руки у вас были в тесте?
Ну, тебе может повезти. Исследователи из Ланкастерского университета в Англии разработали технологию распознавания жестов, которая может превратить практически все - вашу руку, лопаточку, отвертку - в пульт дистанционного управления. Технология, которую исследователи называют «Matchpoint», работает через веб-камеру, используя компьютерное зрение для отслеживания части тела или объекта, когда он взаимодействует с небольшим виджетом в углу экрана. Виджет окружен целями, соответствующими различным функциям - регулировка громкости, прокрутка, смена каналов и т. Д. Пользователь жестами взаимодействует с целями, активируя ползунки, которые перемещаются вверх и вниз с движением пользователя, для управления такими функциями, как громкость.
Существующие технологии управления жестами обычно работают только с определенными объектами или частями тела, которые система уже распознает, такими как выделенный контроллер или рука человека. И они могут быть вежливы в отношении того, насколько близко пользователь находится к экрану или полностью ли они видны камере, поскольку система должна иметь возможность четко идентифицировать рассматриваемый объект. Технология Matchpoint отличается тем, что ищет не конкретный объект, а вращающееся движение. Создатели Matchpoint надеются, что это облегчит работу пользователей.
«Система наиболее полезна, когда пользователь участвует в других действиях и, возможно, не в самой обычной позиции для выполнения жеста», - говорит Кристофер Кларк, один из создателей Matchpoint. «Поскольку система не полагается на обнаружение человека или объекта как такового, она по-прежнему работает независимо от положения или положения пользователя или объектов, которые он может удерживать - прячась под красивым удобным одеялом с чашкой чая».

Matchpoint также позволяет нескольким стрелкам или объектам взаимодействовать с цифровыми досками, масштабировать и поворачивать изображения, что может быть полезно для групповых презентаций. Кроме того, пользователи могут постоянно связывать определенные объекты с элементами управления, что означает, что они сохранят свои функции управления без необходимости инициализации. Таким образом, пользователь может, например, связать игрушечный поезд с функцией регулировки громкости своего планшета. Каждый раз, когда они двигали игрушку вперед, громкость увеличивалась.
Легко понять, как Matchpoint может быть полезен в домашних условиях, позволяя пользователям, скажем, приостановить видео с инструкциями по ремонту автомобиля, не отходя от двигателя, или сменить канал, взмахнув детской бутылочкой, не разбудив спящего новорожденного., Но его создатели надеются, что он использует не только развлечения.
«Приложения, которые мы находим наиболее интересными, включают в себя« стерильные »приложения, такие как хирургия или работа на кухне, где желательно иметь систему, в которой пользователи могут использовать любые типы объектов, не затрагивая прикосновения и перекрестное загрязнение. объекты », говорит Кларк.
Система также может быть полезна для людей с ограниченными возможностями, которые затрудняют использование традиционных инструментов интерфейса, таких как удаленная или компьютерная мышь.
Кларк и его соавтор Ханс Геллерсен представят доклад о Matchpoint в этом месяце на симпозиуме ACM по программному обеспечению и технологиям пользовательского интерфейса 2017 года в Квебеке, конференции по технологиям взаимодействия человека с машиной. В будущем они надеются вывести Matchpoint за пределы фазы прототипа и изучить возможности коммерциализации.
Технологии контроля жестов стали более распространенными в последние годы, но разработчики все еще решают проблемы. Большинство систем испытывают проблемы с распознаванием жестов в условиях низкой освещенности или если пользователь находится слишком далеко. Они также обычно не работают снаружи, так как для оценки расстояния они используют инфракрасные датчики; естественный солнечный свет заслоняет инфракрасные лучи. Им нужны камеры, а это значит, что они не будут работать со старыми телевизорами. А некоторые пользователи просто чувствуют себя глупо или неудобно, размахивая руками.
Матчпойнт представляет собой «постепенное», а не «трансформационное» изменение в разработке более совершенных систем распознавания жестов, говорит Хуан П. Вакс, профессор Школы промышленной инженерии в Университете Пердью, изучающий интерфейсы человек-машина.
«Большой скачок произойдет, когда компьютер или устройство не скажет вам, какое движение вам нужно сделать, чтобы что-то контролировать, но вы действуете естественно, и технология может« вывести »то, что вы хотите сделать», - говорит он. «Возможно, используя мозговые сигналы, как часть интегрированного решения».
Но если Matchpoint действительно появится на рынке, по крайней мере, потерянные пульты могут скоро уйти в прошлое, и мы все будем менять канал с волной банана.