Патент Sony: внутриигровой переводчик языка жестов позволяет глухонемым игрокам играть в игры!
Sony подала патент, направленный на обеспечение лучшего игрового процесса для глухонемых геймеров. Патент демонстрирует технологию, которая может переводить один язык жестов на другой внутриигровой язык жестов в режиме реального времени.
Использование VR-оборудования и облачных игр для перевода в реальном времени
Патент Sony под названием «Перевод языка жестов в виртуальных средах» описывает технологию, которая может переводить американский язык жестов (ASL) на японский язык жестов (JSL) в реальном времени для понимания носителями японского языка.
Sony стремится создать систему, которая поможет глухим игрокам, переводя внутриигровые диалоги на языке жестов в реальном времени. Технология, описанная в патенте, позволит общаться на языке жестов в реальном времени через виртуальный индикатор или аватар, отображаемый на экране. Система сначала переводит жесты на одном языке в текст, затем преобразует текст на другой указанный язык и, наконец, переводит полученные данные в жесты на другом языке.
«Варианты настоящего раскрытия относятся к способам и системам для захвата языка жестов одного пользователя (например, японца) и перевода языка жестов другому пользователю (например, говорящему по-английски)», — описывает Sony в патент. «Поскольку языки жестов различаются в зависимости от регионального происхождения, языки жестов не являются универсальными. Это требует надлежащего захвата языка жестов одного пользователя, понимания его родного языка и создания нового языка жестов для другого пользователя в качестве вывода на его родном языке жестов. "
Sony привела пример того, что систему можно реализовать с помощью VR-оборудования или головных дисплеев (HMD). «В некоторых вариантах реализации HMD подключается к пользовательскому устройству, такому как персональный компьютер, игровая консоль или другое вычислительное устройство, через проводное или беспроводное соединение», — уточняет Sony. «В некоторых вариантах реализации пользовательское устройство отображает графику, отображаемую через HMD, предоставляя пользователю захватывающий опыт просмотра виртуальной среды».
Sony также предложила, чтобы одно пользовательское устройство могло беспрепятственно взаимодействовать с другим пользовательским устройством на игровом сервере через сеть. «В некоторых вариантах реализации игровой сервер выполняет общий сеанс видеоигры, поддерживает каноническое состояние видеоигры и ее виртуальной среды», — заявила Sony, — «и синхронизируется состояние пользовательского устройства по отношению к виртуальной среде».Благодаря этой настройке пользователи могут совместно использовать и взаимодействовать друг с другом в одной и той же виртуальной среде (например, игре) в общей сети или на сервере. Sony также заявила, что в некоторых реализациях системы игровой сервер может быть частью облачной игровой системы, которая сможет «рендеринговать и транслировать видео» между каждым пользовательским устройством.
![Taffy Tales [v1.07.3a]](https://imgs.xfsxw.com/uploads/32/1719554710667e529623764.jpg)
