Последний патент Sony направлен на повышение доступности для глухих геймеров за счет внедрения внутриигрового сурдоперевода в реальном времени. Эта инновационная технология призвана устранить разрыв в общении между игроками, использующими разные языки жестов.
Sony патентует сурдоперевод в реальном времени для видеоигр
Использование технологий виртуальной реальности и облачных игр
Этот патент под названием «ПЕРЕВОД ЖЕСТОВОГО ЯЗЫКА В ВИРТУАЛЬНОЙ СРЕДЕ» предлагает систему, которая переводит языки жестов, такие как американский язык жестов (ASL), на другой, например японский язык жестов (JSL), в в реальном времени во время игры. Это обеспечит беспрепятственное общение между глухими геймерами независимо от их родного языка жестов.
Первоначально система распознает жесты на языке жестов и преобразует их в текст. Затем этот текст переводится на целевой язык, а затем снова преобразуется в соответствующие жесты языка жестов, отображаемые с помощью экранных аватаров или виртуальных индикаторов. Этот процесс обеспечивает точную и плавную коммуникацию в игровой среде.
«В настоящем раскрытии подробно описаны методы и системы для захвата языка жестов одного пользователя и его перевода для другого пользователя на его родной язык жестов», — поясняет Sony в патенте. «Поскольку языки жестов различаются географически, эта технология удовлетворяет потребность в точном захвате, понимании и создании языка жестов на разных языках».
Sony предлагает реализовать эту систему с помощью VR-гарнитур или головных дисплеев (HMD). Эти устройства подключаются к компьютеру пользователя, игровой консоли или другому вычислительному устройству, создавая иммерсивную виртуальную среду.
Кроме того, Sony предлагает сетевую систему, в которой пользовательские устройства взаимодействуют друг с другом и с игровым сервером. Этот сервер управляет состоянием игры и обеспечивает синхронизацию между игроками. Патент также предполагает интеграцию игрового сервера с облачной игровой системой для бесперебойной потоковой передачи и рендеринга игры.
Эта архитектура позволяет игрокам взаимодействовать в одной виртуальной среде, облегчая общение через систему перевода на язык жестов в реальном времени. Эта революционная технология обещает значительно улучшить игровой процесс глухих игроков во всем мире.