Traducteur de la langue des signes de brevets Sony en jeu

Sony a franchi une étape importante vers l'amélioration de l'accessibilité des jeux pour les joueurs sourds en déposant un brevet pour un traducteur en langue des signes en jeu. Cette technologie innovante vise à combler les lacunes de communication en traduisant différentes langues de signe dans les jeux vidéo.

Sony brevets ASL au traducteur JSL pour les jeux vidéo

Proposé d'utiliser les appareils VR et de travailler sur les jeux en nuage

Le dernier brevet de Sony, intitulé "Traduction de la langue des signes dans un environnement virtuel", introduit un système révolutionnaire conçu pour faciliter la traduction en langue des signes en temps réel dans les jeux vidéo. Ce système permettrait à la langue des signes américains (ASL) d'être traduit en langue des signes japonaise (JSL) pour les utilisateurs de langue japonaise, améliorant l'expérience de jeu pour les joueurs sourds.

La technologie décrite dans le brevet consiste à traduire des gestes de signes en texte, à convertir ce texte en une autre langue, puis à le transformer en gestes de signe correspondants de la langue cible. Ce processus permet aux indicateurs virtuels ou aux avatars de communiquer la langue des signes en temps réel lors des interactions en jeu.

Sony explique dans le brevet: "Les implémentations de la présente divulgation se rapportent aux méthodes et systèmes pour capturer la langue des signes d'un utilisateur (par exemple, japonais), et à traduire la langue des signes à un autre utilisateur (par exemple, l'anglais). Parce que les langages de signe varient en fonction de la langue géographique, la langue des signes n'est pas universelle.

Pour implémenter ce système, Sony suggère d'utiliser des appareils de type VR ou des écrans montés sur la tête (HMD). "Dans certaines implémentations, le HMD se connecte via une connexion câblée ou sans fil à un périphérique utilisateur, comme un ordinateur personnel, une console de jeu ou un autre appareil informatique", a expliqué Sony. "Dans certaines implémentations, le périphérique utilisateur rend les graphiques pour l'affichage via le HMD qui fournissent une visualisation immersive de l'environnement virtuel pour l'utilisateur."

De plus, Sony propose que les appareils utilisateur peuvent communiquer de manière transparente sur un réseau avec un serveur de jeu. "Dans certaines implémentations, le serveur de jeux exécute une session partagée d'un jeu vidéo, en maintenant l'état canonique du jeu vidéo et de son environnement virtuel", a déclaré Sony, "et à laquelle les appareils utilisateur sont synchronisés concernant l'état de l'environnement virtuel."

Cette configuration permet aux utilisateurs d'interagir dans le même environnement virtuel sur un réseau ou un serveur partagé. Sony a également mentionné que le serveur de jeux pourrait être intégré dans un système de jeu en nuage, qui "rend et diffuse une vidéo" entre chaque périphérique utilisateur, garantissant une communication fluide et efficace.

En développant cette technologie, Sony vise à créer un environnement de jeu plus inclusif, où les joueurs sourds peuvent participer pleinement et profiter de l'expérience de jeu quelle que soit la langue des signes qu'ils utilisent.