Le brevet révolutionnaire de Sony vise à améliorer l'accessibilité pour les joueurs sourds en introduisant la traduction en langue des signes en temps réel dans le jeu. Cette technologie innovante comble les écarts de communication entre les joueurs utilisant différentes langues des signes.
Sony fait breveter la traduction en langue des signes en temps réel pour les jeux vidéo
Tirer parti de la réalité virtuelle et du cloud gaming pour une communication transparente
Ce brevet, intitulé « TRADUCTION DE LA LANGUE DES SIGNES DANS UN ENVIRONNEMENT VIRTUEL », détaille un système permettant la traduction en temps réel entre les langues des signes, telles que la langue des signes américaine (ASL) et la langue des signes japonaise (JSL). Sony envisage un avenir dans lequel les joueurs sourds pourront communiquer de manière transparente lors des interactions dans le jeu.
La technologie proposée utilise des indicateurs virtuels ou des avatars à l'écran pour afficher la langue des signes traduite en temps réel. Le processus implique une traduction en trois étapes : les gestes des signes sont d'abord convertis en texte, puis traduits dans la langue cible et enfin rendus sous forme de gestes des signes dans la langue des signes cible.
"La présente divulgation décrit des méthodes et des systèmes permettant de capturer la langue des signes d'un utilisateur et de la traduire pour un autre utilisateur dans sa langue des signes native", explique Sony dans le brevet. "Étant donné que les langues des signes varient géographiquement, cette technologie répond au besoin de capture, de compréhension et de génération précises de la langue des signes dans différents contextes linguistiques."
Sony suggère de mettre en œuvre ce système à l'aide de casques VR ou d'écrans montés sur la tête (HMD). "Le HMD se connecte, avec ou sans fil, à un appareil utilisateur (PC, console de jeu, etc.), restituant des graphiques immersifs dans l'environnement virtuel", précise le brevet.
De plus, Sony propose un système en réseau où les appareils des utilisateurs communiquent avec un serveur de jeux. "Le serveur de jeu gère l'état du jeu et l'environnement virtuel, en synchronisant les appareils des utilisateurs", indique le brevet. Cela permet des interactions partagées au sein du même environnement virtuel. Le brevet suggère également une intégration avec les systèmes de jeux en nuage, permettant une diffusion et un rendu vidéo transparents entre les appareils des utilisateurs. Cette configuration facilite les interactions multijoueurs et améliore l'expérience de jeu des joueurs sourds du monde entier.