Het nieuwste patent van Sony richt zich op het verbeteren van de toegankelijkheid voor dove gamers door de introductie van realtime in-game gebarentaalvertaling. Deze innovatieve technologie heeft tot doel de communicatiekloven tussen spelers te overbruggen die verschillende gebarentalen gebruiken.
Sony patenteert real-time gebarentaalvertaling voor videogames
Gebruik maken van VR- en cloudgamingtechnologieën
Dit patent, getiteld "VERTALING VAN GEBARENTAAL IN EEN VIRTUELE OMGEVING", stelt een systeem voor dat gebarentalen, zoals de Amerikaanse gebarentaal (ASL), vertaalt naar een andere, zoals de Japanse gebarentaal (JSL), in realtime tijdens het spelen. Dit zou naadloze communicatie tussen dove gamers mogelijk maken, ongeacht hun moedertaal.
Het systeem registreert in eerste instantie gebarentaalgebaren en zet deze om in tekst. Deze tekst wordt vervolgens vertaald naar de doeltaal voordat deze weer wordt omgezet in de bijbehorende gebarentaalgebaren, weergegeven via avatars op het scherm of virtuele indicatoren. Dit proces zorgt voor nauwkeurige en vloeiende communicatie binnen de spelomgeving.
"De huidige openbaarmaking beschrijft methoden en systemen voor het vastleggen van de gebarentaal van de ene gebruiker en het vertalen ervan voor een andere gebruiker in hun moedertaal", legt Sony uit in het patent. "Aangezien gebarentalen geografisch variëren, komt deze technologie tegemoet aan de behoefte aan het nauwkeurig vastleggen, begrijpen en genereren van gebarentaal in verschillende talen."
Sony stelt voor om dit systeem te implementeren met behulp van VR-headsets of head-mounted displays (HMD's). Deze apparaten kunnen worden aangesloten op de computer, gameconsole of ander computerapparaat van een gebruiker om een meeslepende virtuele omgeving te creëren.
Verder stelt Sony een netwerksysteem voor waarbij apparaten van gebruikers met elkaar en een gameserver communiceren. Deze server beheert de status van het spel en zorgt voor synchronisatie tussen spelers. Het patent suggereert ook dat de gameserver moet worden geïntegreerd met een cloudgamesysteem voor naadloze streaming en weergave van de game.
Dankzij deze architectuur kunnen spelers communiceren binnen dezelfde virtuele omgeving, waardoor de communicatie via het realtime vertaalsysteem in gebarentaal wordt vergemakkelijkt. Deze baanbrekende technologie belooft de game-ervaring voor dove spelers wereldwijd aanzienlijk te verbeteren.
