Look2React : donner vie aux PNJ VR grâce à React guidé par vision dynamique...

📅 Session : Suivi des yeux et des mouvements 📖 Titre : Look2React : Donner vie aux PNJ VR avec des réactions dynamiques guidées par la vision 👨‍🏫 Auteurs : Ritik Vatsal : Université de la Colombie-Britannique ; Xincheng Huang : Université de la Colombie-Britannique ; Robert Xiao : Université de la Colombie-Britannique 📜 Résumé : L'une des promesses centrales des jeux VR est le contrôle accru dont disposent les joueurs grâce à la pose et au langage corporel. Cependant, de nombreux systèmes de personnages non-joueurs (PNJ) ne parviennent pas à répondre de manière convaincante à ces poses, à l'intention de l'utilisateur et au contexte situationnel, limitant ainsi l'immersion. Nous présentons Look2React, un système d'interaction qui capture ce que voient les PNJ, en utilisant un modèle de raisonnement basé sur la vision pour sélectionner les réponses de pose et de texte, permettant aux PNJ de réagir de manière dynamique. Grâce à notre étude utilisateur, nous montrons que Look2React stimule l'engagement, encourageant des interactions plus fréquentes avec les PNJ. Les participants ont rapporté une satisfaction plus élevée, une présence sociale plus forte et des PNJ avec une plus grande profondeur et une plus grande personnalité, ce qui les fait se sentir plus humains. https://ieeevr.org/2026/