In-game gebarentaalvertaler komt naar gamingplatforms (patent aangevraagd)

Sony heeft een patent ingediend met als doel extra toegankelijkheid voor dove gamers te bieden. Het patent van Sony illustreert hoe bepaalde gebarentalen kunnen worden vertaald naar een andere in-game.

Sony Patenteert ASL op JSL-vertaler voor videogamesVoorgesteld om VR-apparaten te gebruiken en te werken via cloudgaming

Sony heeft een patent ingediend dat een real-time gebarentaalvertaler aan videogames toevoegt. Het patent, getiteld "VERTALING VAN GEBARENTAAL IN EEN VIRTUELE OMGEVING", illustreert een technologie waarbij Amerikaanse Gebarentaal (ASL) kan worden gecommuniceerd naar een Japanssprekende gebruiker met behulp van Japanse Gebarentaal (JSL).

Sony zei dat het tot doel heeft een systeem op te zetten dat dove gamers kan helpen via realtime vertalingen van gebarentalen tijdens in-game gesprekken. De technologie die in het patent wordt beschreven, zou het mogelijk maken dat virtuele indicatoren of avatars die op het scherm worden weergegeven, gebarentaal in realtime kunnen communiceren. Het systeem vertaalt in eerste instantie de gebarengebaren van de ene taal in tekst, converteert de tekst vervolgens naar een andere gespecificeerde taal en vertaalt uiteindelijk de ontvangen gegevens in de gebarengebaren van de andere taal.

"Implementaties van de huidige openbaarmaking hebben betrekking op methoden en systemen voor het vastleggen van gebarentaal van de ene gebruiker (bijvoorbeeld Japans) en het vertalen van de gebarentaal naar een andere gebruiker (bijvoorbeeld Engels),' beschreef Sony in het patent. "Omdat gebarentalen variëren afhankelijk van de geografische oorsprong, is gebarentaal niet universeel. Dit zorgt voor de noodzaak om de gebarentaal van de ene gebruiker op de juiste manier vast te leggen, de moedertaal te begrijpen en nieuwe gebarentaal te genereren als uitvoer voor een andere gebruiker in zijn moedertaal. ."

Een manier waarop dit systeem zou kunnen worden geïmplementeerd, zoals Sony illustreerde, zou zijn met behulp van een VR-type apparaat of een op het hoofd gemonteerd display (HMD). "In sommige implementaties maakt de HMD via een bekabelde of draadloze verbinding verbinding met een gebruikersapparaat, zoals een personal computer, gameconsole of ander computerapparaat", legt Sony uit. "In sommige implementaties geeft het gebruikersapparaat afbeeldingen weer voor weergave via de HMD, waardoor de gebruiker een meeslepende kijk op de virtuele omgeving krijgt."

Sony stelde verder voor dat het ene gebruikersapparaat naadloos zou kunnen communiceren met een ander gebruikersapparaat via een netwerk met een gameserver. "In sommige implementaties voert de gameserver een gedeelde sessie van een videogame uit, waarbij de canonieke status van de videogame en zijn virtuele omgeving behouden blijft", zei Sony, "en waarmee de gebruikersapparaten worden gesynchroniseerd met betrekking tot de status van de virtuele omgeving ."

Met deze opstelling kunnen gebruikers met elkaar delen en met elkaar communiceren in dezelfde virtuele omgeving, aka game, via een gedeeld netwerk of server. Sony zei bovendien dat in sommige implementaties van het systeem de gameserver deel zou kunnen uitmaken van een cloud-gamingsysteem, dat "video rendert en streamt" tussen elk gebruikersapparaat.