La réalité virtuelle devient de plus en plus une chose, maintenant que nous avons des casques de haute qualité et la puissance de calcul nécessaire pour générer des environnements attrayants. De nombreux systèmes de réalité virtuelle utilisent des contrôleurs tenus en l’air ou des systèmes basés sur des caméras qui suivent les membres et les mains pour l’interaction. Cependant, les scénarios de productivité nécessitent souvent des interactions prolongées sur une longue période, ce qui nécessite généralement de travailler sur des surfaces qui permettent au corps de se reposer par intermittence. Pour faciliter cela, un groupe de chercheurs de l’ETH Zurich a développé TapID, y compris un papier de pré-impression (PDF) qui sera présenté à l’IEEE VR 2021 plus tard ce mois-ci.
TapID se compose d’un bracelet qui porte deux capteurs de mouvement, dont un à chaque poignet. Cela permet à TapID de détecter les tapotements de chacun des doigts de l’utilisateur individuellement, grâce à un algorithme d’apprentissage automatique qui analyse les vibrations uniques à travers votre système squelettique. Ceci est démontré comme étant utile pour les environnements de réalité virtuelle, où l’utilisateur peut taper sur un clavier virtuel ou interagir avec des objets virtuels sur une surface, en utilisant ses doigts comme il le ferait dans le monde réel. Il s’agit d’une fusion de capteurs avec les fonctionnalités des casques VR modernes qui incluent le suivi des mains. Les bracelets TapID offrent une granularité et une détection des petits mouvements qui ne sont pas aussi précises grâce aux capteurs montés sur le casque et à la détection par caméra.
Nous ne sommes pas entièrement convaincus de l’utilité de s’asseoir dans un environnement virtuel pour taper sur un faux clavier lorsque les moniteurs et les vrais claviers sont plus tactiles et moins chers. Cependant, disposer d’un appareil capable de déterminer avec précision les interactions des doigts individuels est sûr d’avoir des applications en VR. Et que les cas d’utilisation démontrés soient viables ou non, la technologie fonctionne effectivement.
C’est passionnant de voir le facteur de forme du bracelet. Cela évoque la possibilité d’améliorer les interactions des robinets dans les montres intelligentes pour des utilisations non-VR. Nous envisageons des gestes de type clavier à accords qui détectent quels doigts tapent mais n’ont pas besoin de précision de position.
Ceux qui expérimentent les interfaces VR peuvent trouver utile de procéder à une rétro-ingénierie de ce qui est déjà sur le marché, comme nous l’avons déjà présenté. Ou, vous pouvez simplement créer le vôtre! Vidéo après la pause.
