Sony Patenten Revolutionaire in-game gebarentaaltool

Sony heeft een patent ingediend dat tot doel heeft de toegankelijkheid voor dove gamers te verbeteren. Het patent van Sony illustreert hoe specifieke gebarentalen kunnen worden omgezet naar een andere in-game.

Sony patenteert ASL naar JSL Translator voor videogamesVoorgesteld om VR-apparaten te gebruiken en te werken via cloudgaming

Sony heeft een patent aangevraagd dat een real-time gebarentolk aan videogames toevoegt. Het patent, getiteld "VERTALING VAN GEBARENTAAL IN EEN VIRTUELE OMGEVING", illustreert een technologie waarbij Amerikaanse Gebarentaal (ASL) kan worden gecommuniceerd naar een Japanssprekende gebruiker met behulp van Japanse Gebarentaal (JSL).

Sony zei dat het een systeem wil implementeren dat dove gamers kan helpen via realtime interpretaties van gebarentalen tijdens in-game chats. De technologie die in het patent wordt beschreven, zou het mogelijk maken dat virtuele indicatoren of avatars op het scherm in realtime gebarentaal kunnen communiceren. Het systeem zal in eerste instantie de gebaren van de ene taal in tekst vertalen, vervolgens de tekst naar een andere aangewezen taal converteren en uiteindelijk de ontvangen gegevens vertalen naar de gebaren van de andere taal.

"Implementaties van de huidige openbaarmaking hebben betrekking op methoden en systemen voor het vastleggen van gebarentaal van de ene gebruiker (bijvoorbeeld Japans) en het vertalen van de gebarentaal naar een andere gebruiker (bijvoorbeeld Engels),' beschreef Sony in het patent. "Omdat gebarentalen verschillen afhankelijk van de geografische oorsprong, is gebarentaal niet universeel. Dit vereist het op de juiste manier vastleggen van de gebarentaal van de ene gebruiker, het begrijpen van de moedertaal en het genereren van nieuwe gebarentaal als output voor een andere gebruiker in hun moedertaal."

Een manier waarop dit systeem zou kunnen worden geïmplementeerd, zoals Sony illustreerde, zou zijn met behulp van een VR-type apparaat of headset (HMD). "In sommige implementaties maakt de HMD via een bekabelde of draadloze verbinding verbinding met een gebruikersapparaat, zoals een personal computer, gameconsole of ander computerapparaat", legt Sony uit. "In sommige implementaties geeft het gebruikersapparaat afbeeldingen weer voor weergave via de HMD, waardoor de gebruiker een meeslepende kijk op de virtuele omgeving krijgt."

Sony stelde verder voor dat het ene gebruikersapparaat naadloos zou kunnen communiceren met een ander gebruikersapparaat via een netwerk met een gameserver. "In sommige implementaties voert de gameserver een gedeelde sessie van een videogame uit, waarbij de canonieke status van de videogame en zijn virtuele omgeving behouden blijft", zei Sony, "en waarmee de gebruikersapparaten worden gesynchroniseerd met betrekking tot de status van de virtuele omgeving ."

Met deze opstelling kunnen gebruikers met elkaar delen en met elkaar communiceren in dezelfde virtuele omgeving, aka game, via een gedeeld netwerk of server. Sony zei bovendien dat in sommige implementaties van het systeem de gameserver deel zou kunnen uitmaken van een cloud-gamingsysteem, dat "video rendert en streamt" tussen elk gebruikersapparaat.