Sony Представляет патент на внутриигровой сурдоперевод

Sony подала заявку на патент, чтобы обеспечить лучшие функции доступности игр для глухонемых геймеров. Патент показывает, как определенные языки жестов можно перевести на другой внутриигровой язык.

Патент Sony: переводчик ASL в JSL для видеоигр

Планируется использовать VR-оборудование и запускать его через облачные игры

Sony подала заявку на патент, чтобы добавить в видеоигры сурдоперевод в реальном времени. Патент под названием «Интерпретация языка жестов в виртуальных средах» демонстрирует метод, с помощью которого американский язык жестов (ASL) может передаваться носителям японского языка с использованием японского языка жестов (JSL).

Sony заявляет, что ее цель — создать систему, которая поможет глухим игрокам, переводя язык жестов в реальном времени во время внутриигровых разговоров. Технология, описанная в патенте, позволит виртуальному индикатору или аватару, отображаемому на экране, передавать язык жестов в реальном времени. Система сначала переведет жесты на одном языке в текст, затем преобразует текст на другой указанный язык и, наконец, переведет полученные данные в жесты на другом языке.

Sony описывает в патенте: «Варианты настоящего изобретения относятся к способам и системам для захвата языка жестов одного пользователя (например, японца) и перевода языка жестов другому пользователю (например, говорящему по-английски). . Поскольку языки жестов различаются в зависимости от региона, языки жестов не являются универсальными. Для этого необходимо соответствующим образом захватить язык жестов одного пользователя, понять его родной язык и создать новый язык жестов в качестве вывода для другого пользователя».

В Sony пояснили, что один из способов реализации этой системы — с помощью оборудования типа VR или головных дисплеев (HMD). Sony подробно описывает: «В некоторых вариантах реализации HMD подключается к пользовательскому устройству, такому как персональный компьютер, игровая консоль или другое вычислительное устройство, через проводное или беспроводное соединение. В некоторых вариантах реализации пользовательское устройство отображает графику, отображаемую через HMD, предоставляющий пользователям захватывающий опыт просмотра в виртуальной среде».

Sony также предложила, чтобы одно пользовательское устройство могло беспрепятственно взаимодействовать с другим пользовательским устройством на игровом сервере через сеть. В Sony заявили: «В некоторых вариантах реализации игровой сервер выполняет общий сеанс видеоигры, поддерживает каноническое состояние видеоигры и ее виртуальной среды, а пользовательское устройство синхронизируется с ними относительно состояния виртуальной среды».

Благодаря этой настройке пользователи могут совместно использовать и взаимодействовать в одной и той же виртуальной среде (например, игре) в общей сети или на сервере. Sony также заявила, что в некоторых вариантах системы игровой сервер может быть частью облачной игровой системы, которая сможет «рендеринговать и транслировать видео» между каждым пользовательским устройством.