Clé à emporter
- Des chercheurs ont mis au point un mécanisme permettant de contrôler les avatars en réalité virtuelle à l'aide d'expressions faciales.
- Les chercheurs ont découvert que les expressions faciales créaient des expériences beaucoup plus immersives.
-
Cette technique peut aider à rendre la réalité virtuelle accessible aux personnes handicapées.
Après avoir révolutionné la biométrie, les visages sont prêts à dynamiser une autre technologie: la réalité virtuelle (VR).
Dans une étude récente, une équipe internationale de chercheurs d'Australie, de Nouvelle-Zélande et d'Inde a utilisé des expressions faciales courantes, telles qu'un sourire et un froncement de sourcils, pour interagir et déclencher des actions spécifiques dans des environnements de réalité virtuelle, avec des résultats surprenants.
"Dans l'ensemble, nous nous attendions à ce que les contrôleurs portables fonctionnent mieux car ils constituent une méthode plus intuitive que les expressions faciales", a noté le professeur Mark Billinghurst de l'Université d'Australie du Sud, l'un des chercheurs impliqués dans l'expérience, dans un communiqué de presse. "Cependant, les gens ont déclaré se sentir plus immergés dans les expériences de réalité virtuelle contrôlées par les expressions faciales."
Immersion Intuitive
Les chercheurs, dirigés par le chercheur de l'Université du Queensland, le Dr Arindam Dey, qui travaille avec le professeur Billinghurst au Centre australien de recherche sur les environnements interactifs et virtuels, ont fait valoir que la plupart des interfaces VR nécessitent des interactions physiques à l'aide de contrôleurs portables.
Dans leur article, les chercheurs notent qu'ils ont décidé d'utiliser les expressions d'une personne pour manipuler des objets en réalité virtuelle sans utiliser de contrôleur portable ou de pavé tactile. Ils ont conçu un mécanisme pour identifier diverses expressions faciales, y compris la colère, la joie et la surprise, à l'aide d'un casque d'électroencéphalogramme (EEG).
Par exemple, un sourire était utilisé pour déclencher la commande de déplacement de l'avatar virtuel de l'utilisateur, tandis qu'un froncement de sourcils déclenchait une commande d'arrêt et qu'un serrement était utilisé pour effectuer une action prédéfinie, au lieu d'utiliser un contrôleur portable pour contrôler l'avatar, a expliqué le professeur Billinghurst dans le communiqué de presse.
Dans le cadre de la recherche, le groupe a conçu trois environnements virtuels, deux joyeux et effrayants et un troisième neutre. Cela a permis aux chercheurs de mesurer l'état cognitif et physiologique de chaque participant alors qu'ils étaient immergés dans chacun des trois scénarios.
Dans l'environnement joyeux, les participants ont souri pour se déplacer dans un parc pour attraper des papillons avec une mâchoire serrée et ont froncé les sourcils pour s'arrêter. De même, dans l'environnement effrayant, les mêmes expressions ont été utilisées pour naviguer dans une base souterraine pour tirer sur des zombies, tandis que dans l'environnement neutre, les expressions faciales ont aidé les utilisateurs à se déplacer dans un atelier, en ramassant divers objets.
Les chercheurs ont ensuite rassemblé les effets neurologiques et physiologiques de l'interaction de l'utilisateur dans les trois environnements de réalité virtuelle à l'aide d'expressions faciales et les ont comparés aux interactions menées via des contrôleurs portables couramment utilisés.
Prof. Billinghurst a noté qu'à la fin de l'expérience, les chercheurs ont conclu que bien que s'appuyer uniquement sur les expressions faciales dans un environnement de réalité virtuelle soit un travail difficile pour le cerveau, cela donne aux participants une expérience plus immersive et réaliste que l'utilisation de contrôleurs portables.
Un simple gadget ?
Les chercheurs affirment que l'interaction avec la réalité virtuelle par le biais d'expressions faciales fournit non seulement une nouvelle façon d'utiliser la réalité virtuelle, mais la technique la rendra également plus accessible. En abandonnant les contrôleurs portables, les personnes handicapées, des personnes atteintes d'une maladie du motoneurone aux amputés, pourront enfin faire l'expérience de la réalité virtuelle.
Même s'ils s'efforcent de le rendre plus utilisable, les chercheurs suggèrent que la technologie peut également être utilisée pour compléter les contrôleurs portables, en particulier pour les environnements de réalité virtuelle où les expressions faciales sont une forme d'interaction plus naturelle.
"La plupart des communications humaines sont en fait du langage corporel [et] des micro-expressions faciales dont nous ne sommes souvent pas conscients, donc un suivi facial approprié peut certainement amener les interactions sociales virtuelles à un tout autre niveau." Lucas Rizzotto, créateur intrépide et YouTuber, a déclaré à Lifewire par e-mail.
Rizzotto, dont la création la plus célèbre est une machine à voyager dans le temps en réalité virtuelle, pense que le suivi du visage a définitivement un rôle à jouer en ce qui concerne la réalité virtuelle sociale, la réalité augmentée (RA) et le métaverse, bien qu'il ait des réserves à ce sujet. acceptation générale.
"En ce qui concerne purement le contrôle des expériences avec votre visage, je suis sûr qu'il y a des possibilités créatives ici en matière d'art et d'accessibilité", a déclaré Rizzotto. "Mais cela pourrait aussi facilement devenir un gadget alors que nous avons tant de formes d'entrée plus fiables."
