Look2React: 동적 비전 기반 반응으로 VR NPC를 생생하게 만들기...

📅 세션: 눈 및 동작 추적 📖 제목: Look2React: 동적 비전 기반 반응으로 VR NPC를 생생하게 만들기 👨‍🏫 저자: Ritik Vatsal: University of British Columbia; 황신청(Xincheng Huang): 브리티시 컬럼비아 대학교; Robert Xiao: University of British Columbia 📜 요약: VR 게임의 핵심 약속은 ​​플레이어가 포즈와 신체 언어를 통해 제어할 수 있는 능력이 향상된다는 것입니다. 그러나 많은 NPC(비플레이어 캐릭터) 시스템은 이러한 포즈, 사용자 의도, 상황적 맥락에 설득력 있게 반응하지 못해 몰입감을 제한합니다. 우리는 NPC가 보는 것을 캡처하는 상호 작용 시스템인 Look2React를 제시합니다. 비전 기반 추론 모델을 사용하여 포즈와 텍스트 응답을 선택하여 NPC가 동적으로 반응할 수 있도록 합니다. 사용자 연구를 통해 Look2React가 참여도를 높이고 더 빈번한 NPC 상호 작용을 장려한다는 것을 보여줍니다. 참가자들은 더 높은 만족도, 더 강한 사회적 존재감, 더 깊이 있고 개성 있는 NPC를 보고하여 더 인간적인 느낌을 받았습니다. https://ieeevr.org/2026/