Clé à emporter
- Des chercheurs ont proposé une nouvelle façon de taper dans la réalité virtuelle qui utilise l'IA pour analyser les vibrations de vos os.
- TapID pourrait permettre aux gens de taper avec des casques virtuels sur n'importe quelle surface.
- Oculus développe une technologie permettant d'utiliser les caméras de son casque pour lire les mouvements de vos doigts lorsque vous tapez sur un clavier virtuel.
Tapez du texte tout en portant un casque de réalité virtuelle pourrait devenir plus facile grâce à une nouvelle invention qui analyse les vibrations de vos os.
L'utilisation d'un clavier en réalité virtuelle est délicate, car vous ne pouvez vraiment pas voir où vos doigts atterrissent. Le nouveau gadget TapID est un bracelet qui porte deux capteurs de mouvement, un porté à chaque poignet, selon des chercheurs qui ont récemment publié un article sur leur invention. L'appareil détecte les tapotements de chacun des doigts de l'utilisateur individuellement.
« À l'heure actuelle, la plupart des utilisateurs de réalité virtuelle utilisent un contrôleur portable qui agit un peu comme un pointeur laser », a déclaré Scott Camball, un passionné de télécommunications et de téléconférence, dans une interview par e-mail. Ils doivent pointer chaque lettre sur le clavier virtuel, et cela peut prendre beaucoup de temps pour taper des choses. Cela fonctionne pour les jeux vidéo, mais pas pour les tâches liées au travail. TapID permettrait aux utilisateurs d'avoir un espace de travail virtuel avec de grands écrans sans l'encombrement d'un ordinateur de bureau.”
Laissez vos doigts parler
TapID fonctionne en analysant les vibrations de votre système squelettique à l'aide d'un algorithme d'apprentissage automatique. Dans les environnements VR, les utilisateurs peuvent taper sur un clavier virtuel ou interagir avec des objets virtuels sur une surface, en utilisant leurs doigts.
"TapID permettrait aux utilisateurs d'avoir un espace de travail virtuel avec de grands écrans sans l'encombrement d'un ordinateur de bureau."
« Nous proposons de déplacer toutes les interactions directes en réalité virtuelle vers des surfaces passives », écrivent les auteurs dans leur article. "Par rapport à l'interaction en l'air, l'interaction tactile sur les surfaces offre aux utilisateurs la possibilité de reposer leurs bras entre les interactions tout en offrant simultanément un soutien physique lors d'interactions prolongées."
Autres façons de taper en VR
Les entreprises de réalité virtuelle espèrent rendre les utilisateurs plus productifs en proposant des alternatives aux systèmes de pointage actuels. Facebook Reality Labs développe une technologie pour utiliser des caméras sur le casque Oculus pour lire les mouvements de vos doigts lorsque vous tapez sur un clavier virtuel, a souligné Camball.
"L'avantage est qu'aucun bracelet n'est nécessaire, mais le suivi des mains de Facebook Labs ne fonctionne pas actuellement assez bien pour être adopté par le grand public", a-t-il ajouté."Actuellement, l'ergonomie de la saisie en VR est une préoccupation majeure, car les méthodes de saisie courantes avec un clavier virtuel sont fatigantes en raison de la nécessité de tenir un contrôleur ou les mains dans le champ de vision de la caméra."
Les fabricants travaillent également sur un gadget en forme d'anneau que les utilisateurs de réalité virtuelle peuvent mettre sur leur doigt, a déclaré Ivan Pleshkov, développeur chez ScienceSoft, une société de développement de logiciels, dans une interview par e-mail. "Il est encore plus pratique à porter et plus intuitif à utiliser - l'utilisateur peut dessiner des personnages dans les airs et ne dépend pas de l'emplacement de la caméra", a-t-il ajouté.
Une autre méthode de saisie en cours de développement est un clavier virtuel qui utilise le suivi oculaire. "Grâce au capteur qui capte et traite l'emplacement des yeux, un utilisateur peut saisir des caractères en posant son regard dessus pour les saisir", a déclaré Pleshkov. "Cela promet d'être une expérience moins fatigante, bien que la vitesse de frappe soit remise en question - la méthode nécessite quelques aménagements pour l'augmenter.”
L'utilisation d'un vrai clavier en VR est une option, bien qu'elle soit difficile à manier pour le moment. L'application Immersed for the Oculus Quest est un espace de travail virtuel partagé qui offre un moyen de calibrer un clavier physique afin que vous puissiez taper en VR. Dans une démonstration publiée sur Reddit, le fondateur d'Immersed, Renji Bijoy, a démontré qu'il écrivait à 164 mots par minute en utilisant la fonctionnalité.
Certains développeurs espèrent que le contrôle vocal pourrait être meilleur que n'importe quel clavier.
Les contrôleurs manuels maladroits rebutent souvent les nouveaux utilisateurs de réalité virtuelle, a déclaré Ottomatias Peura, responsable de la croissance de la société de logiciels de contrôle vocal Speechly, dans une interview par e-mail. "Cela est particulièrement problématique dans certains environnements VR qui ne peuvent être utilisés qu'une ou deux fois, comme les environnements pour l'immobilier ou la musique live", a-t-il ajouté.
La pratique peut améliorer la façon dont les utilisateurs contrôlent les contrôleurs standard, mais manipuler la réalité virtuelle par la parole est encore mieux, a déclaré Peura.
"La voix est également une excellente option pour améliorer l'expérience utilisateur en réalité virtuelle, car c'est la modalité d'interaction la plus naturelle pour nous, les humains", a-t-il ajouté. "Bien qu'il puisse être difficile de cliquer sur B avec le contrôleur de gauche avec vos lunettes VR, il est très intuitif de dire "porte ouverte"."
