Notre visage peut ouvrir un téléphone intelligent, offrir un accès à un développement sécurisé et accélérer la gestion des passeports dans les aéroports, en vérifiant notre identification pour plusieurs raisons. Un groupe international de chercheurs de Melbourne, de Nouvelle-Zélande et d’Inde vient de faire passer la technologie de reconnaissance faciale à un niveau supérieur, en utilisant le concept d’une personne pour utiliser des objets dans un environnement de vérité virtuelle sans utiliser de contrôleur portable ou de pavé tactile. Dans le cadre d’une première mondiale dirigée par le docteur Arindam Dey, spécialiste du College of Queensland, des experts en interaction homme-machine ont utilisé des stratégies de traitement neuronal pour détecter le sourire, le froncement des sourcils et la mâchoire serrée d’une personne et ont utilisé chaque concept pour déclencher des actions particulières dans un environnement de vérité numérique. « La principale motivation de ce travail était de rendre le métavers plus accessible et plus ouvert », explique le Dr Dey. « Dans le même temps, l’expression du visage peut également être utilisée pour permettre des relations comme s’embrasser et s’aérer dans l’environnement virtuel d’une manière plus pratique qu’aujourd’hui. » Parmi les chercheurs impliqués dans l’essai, le professeur Tag Billinghurst de l’Université d’Australie du Sud, déclare que le système a été conçu pour identifier diverses expressions faciales en utilisant un casque EEG. « Un sourire a été utilisé pour déclencher la commande de déplacement, un froncement de sourcils pour la commande d’arrêt et une crispation pour la commande d’action, au lieu d’une commande manuelle pour effectuer ces mesures », explique le professeur Billinghurst. « Essentiellement, nous enregistrons des expressions faciales courantes telles que la frustration, le contentement et le choc et nous les appliquons dans un environnement de vérité virtuelle. » Ils ont développé trois environnements virtuels — heureux, neutre et effrayant — et ont calculé l’état cognitif et physiologique de chaque personne pendant qu’elle était immergée dans chaque scénario. En reproduisant trois expressions faciales universelles — un sourire, un froncement de sourcils ainsi qu’une crispation — ils ont exploré si les modifications de l’environnement déclenchaient l’une des 3 expressions, en fonction des réponses émotionnelles et physiologiques. Par exemple, dans l’environnement heureux, les clients devaient se déplacer dans une aire de loisirs pour attraper des papillons à l’aide d’un filet. Un individu se déplaçait lorsqu’il souriait et s’arrêtait lorsqu’il fronçait les sourcils. Dans l’atmosphère neutre, des individus avaient pour mission de déplacer un atelier pour récupérer des objets éparpillés un peu partout. L’os de la mâchoire serrée a déclenché un mouvement – en l’occurrence ramasser chaque objet – alors que les instructions de début et de fin de mouvement avaient été lancées avec un sourire et un froncement de sourcils. Les mêmes expressions faciales ont été utilisées dans l’environnement effrayant, dans lequel les participants ont navigué dans une fondation souterraine pour tirer sur des zombies. « Dans l’ensemble, nous nous attendions à ce que les contrôleurs portables donnent de bien meilleurs résultats, car il s’agit d’une technique plus conviviale que l’expression faciale, néanmoins les gens ont déclaré se sentir beaucoup plus immergés dans les expériences de RV gérées par les expressions faciales. » Le professeur Billinghurst affirme que se fier à l’expression du visage dans un environnement RV est un travail difficile pour le cerveau mais offre aux clients une rencontre bien plus réaliste. « Idéalement, avec un peu plus d’étude, nous rendons l’expérience beaucoup plus conviviale », dit-il. En plus d’offrir une nouvelle méthode d’utilisation de la RV, la technique permettra également aux personnes handicapées – y compris les amputés et les personnes atteintes de la maladie du motoneurone – d’interagir les mains libres dans la RV, sans avoir à utiliser des contrôleurs conçus pour les personnes valides. Selon les chercheurs, la technologie pourrait également être utilisée en complément des contrôleurs portables lorsque les expressions faciales constituent une forme plus naturelle de connexion.