Focus International by Iligo – Reproduire les mouvements des yeux dans le métavers

Reproduire les mouvements des yeux dans le métavers

L’agence

L’Université de Duke

Le pays

États-Unis

L’annonceur

Duke University est une université privée fondée en 1838, spécialisée dans la recherche et basée en Caroline du Nord.

L’objectif, l’insight

Les ingénieurs informaticiens de cette université ont développé un programme qui reproduit sur le monde virtuel les mouvements oculaires humains. L’objectif est d’aider les développeurs à créer des applications pour le métavers tout en protégeant la vie privée des utilisateurs.

La stratégie adoptée

« Si vous souhaitez détecter si une personne lit une bande dessinée ou de la haute littérature juste en regardant ses yeux, vous pouvez le faire », a déclaré Maria Gorlatova, professeure adjointe du Nortel Networks en génie électrique et informatique chez Duke. Ce programme permet de développer des yeux virtuels qui simulent la façon dont les humains regardent le monde avec suffisamment de précision pour que les entreprises puissent entraîner des programmes de réalité virtuelle et augmentée qui seront ensuite intégrés dans le métaverse.

La technologie utilisée

Les mouvements oculaires sont recréés sur le monde virtuel grâce à l’analyse de chaque infime mouvement effectué par les yeux humains et du niveau de dilatation des pupilles. En effet, la façon dont nos pupilles se dilatent montre comment nous nous sentons : ennuyés, excités, en colère et même si nous sommes à l’aise ou non dans une conversation… Lorsque vous parlez à quelqu’un d’autre, il est naturel que vos yeux alternent entre regarder les yeux, la bouche et le nez de cette personne pendant des durées variables. Sur la base de ces éléments, des chercheurs de l’Université Duke ont créé un modèle qui a extrait où se trouvent ces caractéristiques chez des interlocuteurs humains et programmé leur yeux virtuels pour imiter statistiquement le temps passé sur chaque partie du visage. « Si vous donnez à EyeSyn de nombreuses informations différentes et que vous l’exécutez suffisamment de fois, vous créerez un ensemble de données de mouvements oculaires synthétiques suffisamment volumineux pour former un classificateur (apprentissage automatique) pour un nouveau programme », a déclaré Maria Gorlatova.

Les résultats

La phase de tests du programme a démontré qu’EyeSyn était totalement capable de reproduire de manière très précise les modèles distincts de signaux de regard du monde réel ainsi que de reproduire différentes réactions des yeux de plusieurs personnes. En d’autres termes, les résultats des yeux virtuels étaient équivalents à ceux des yeux humains. Cette performance a ensuite été considérée comme suffisamment bonne pour que les entreprises puissent l’utiliser comme référence pour former de nouvelles plateformes et de nouveaux logiciels de métaverse. De plus, il est possible de personnaliser les algorithmes EyeSyn après avoir interagi avec des utilisateurs spécifiques. Ceci est fait afin de reproduire la réalité et pour que les logiciels commerciaux obtiennent de meilleurs résultats. Comme la personnalisation des algorithmes peut être effectuée sur des systèmes locaux, les participants n’ont pas à s’inquiéter du risque que les données sur leurs mouvements oculaires se retrouvent sur une grande base de données.