Sony Onthult patent voor in-game gebarentaalvertaler

Sony heeft een patent ingediend met als doel extra toegankelijkheid voor dove gamers te bieden. Het patent van Sony illustreert hoe bepaalde gebarentalen kunnen worden vertaald naar een andere in-game.

Sony patenteert ASL naar JSL Translator voor videogamesVoorgesteld om VR-apparaten te gebruiken en te werken via cloudgaming

Sony heeft een patent aangevraagd dat een real-time gebarentaalvertaler aan videogames toevoegt. Het patent, getiteld "VERTALING VAN GEBARENTAAL IN EEN VIRTUELE OMGEVING", illustreert een technologie waarbij Amerikaanse Gebarentaal (ASL) kan worden gecommuniceerd naar een Japanssprekende gebruiker met behulp van Japanse Gebarentaal (JSL).

Sony zei dat het tot doel heeft een systeem op te zetten dat dove spelers kan helpen via realtime vertalingen van gebarentalen tijdens in-game gesprekken. De technologie die in het patent wordt beschreven, zou het mogelijk maken dat virtuele indicatoren of avatars die op het scherm worden weergegeven, gebarentaal in realtime kunnen communiceren. Het systeem vertaalt in eerste instantie de gebarengebaren van de ene taal in tekst, converteert de tekst vervolgens naar een andere gespecificeerde taal en vertaalt uiteindelijk de ontvangen gegevens in de gebarengebaren van de andere taal.

"Implementaties van de huidige openbaarmaking hebben betrekking op methoden en systemen voor het vastleggen van gebarentaal van de ene gebruiker (bijvoorbeeld Japans) en het vertalen van de gebarentaal naar een andere gebruiker (bijvoorbeeld Engels),' beschreef Sony in het patent. "Omdat gebarentalen variëren afhankelijk van de geografische oorsprong, is gebarentaal niet universeel. Dit zorgt voor de noodzaak om de gebarentaal van de ene gebruiker op de juiste manier vast te leggen, de moedertaal te begrijpen en nieuwe gebarentaal te genereren als output voor een andere gebruiker in zijn moedertaal. ."

Een manier waarop dit systeem kan worden geïmplementeerd, zoals Sony geïllustreerd, is met behulp van een VR-apparaat of op het hoofd gemonteerd weergave (HMD). "In sommige implementaties maakt de HMD via een bekabelde of draadloze verbinding verbinding met een gebruikersapparaat, zoals een personal computer, gameconsole of ander computerapparaat", legt Sony uit. "In sommige implementaties geeft het gebruikersapparaat afbeeldingen weer voor weergave via de HMD die de gebruiker een meeslepende weergave van de virtuele omgeving bieden."

Sony stelde verder voor dat één gebruikersapparaat naadloos zou kunnen communiceren met een ander gebruikersapparaat via een netwerk met een gameserver. "In sommige implementaties voert de gameserver een gedeelde sessie van een videogame uit, waarbij de canonieke status van de videogame en zijn virtuele omgeving behouden blijft", zegt Sony, "en waarmee de gebruikersapparaten worden gesynchroniseerd met betrekking tot de toestand van de virtuele omgeving."

Met deze opstelling kunnen gebruikers met elkaar delen en met elkaar communiceren in dezelfde virtuele omgeving, aka game, via een gedeeld netwerk of server. Sony zei bovendien dat in sommige implementaties van het systeem de gameserver deel zou kunnen uitmaken van een cloud-gamingsysteem, dat "video rendert en streamt" tussen elk gebruikersapparaat.