Новая технология преобразует ладонь в интерфейс для виртуальной реальности

Ученые из Университета Карнеги-Меллона разработали систему EgoTouch для управления виртуальной реальностью с помощью ладони пользователя.
Технология основана на стандартной RGB-камере, встроенной в VR-гарнитуру, и анализирует тени и деформации кожи при касании пальцем другой руки.
EgoTouch обеспечивает точность определения касаний до 96% и различает силу и тип нажатий с точностью до 98%.
Технология позволяет повысить скорость, точность и удобство работы в виртуальной реальности по сравнению с обычными «воздушными» интерфейсами.
EgoTouch использует стандартную RGB-камеру, встроенную в VR-гарнитуру, для определения касаний на ладони.
Алгоритм был обучен на данных, полученных от добровольцев, и связывает определенные визуальные образы с конкретными точками касания, силой нажатия и продолжительностью контакта.
EgoTouch не требует калибровки и готова к работе сразу после включения.