EgoTouch: инновационный инструмент для управления AR/VR с помощью прикосновений к коже

Исследователи из Университета Карнеги-Меллона представили инновационный инструмент под названием EgoTouch, который использует искусственный интеллект для управления интерфейсами дополненной и виртуальной реальности (AR/VR) с помощью прикосновений к коже.

EgoTouch работает на основе обычных камер, которые способны распознавать прикосновения. Этот инструмент собирает данные с сенсорного датчика, расположенного на пальце и ладони. В процессе обучения модель EgoTouch учится различать различные типы прикосновений с высокой точностью — более 96%. Она способна распознавать прикосновения, нажатия, поднятие и перетаскивание, а также определять их силу.

EgoTouch может быть полезен для имитации жестов на сенсорном экране с помощью кожи, позволяя смартфонам распознавать прокрутку, масштабирование и другие действия.