Sony Раскрывает прорыв: внутриигровой переводчик преодолевает лингвистические барьеры

Sony подала заявку на патент, целью которого является обеспечение дополнительной доступности для глухих геймеров. Патент Sony показывает, как некоторые языки жестов могут быть переведены на другой язык жестов в игре.

Sony патентует переводчик ASL на JSL для видеоигр. Предлагается использовать устройства виртуальной реальности и Работа над облачными играми

Sony подала заявку на патент, который добавляет в видеоигры переводчик языка жестов в реальном времени. Патент под названием «ПЕРЕВОД ЖЕСТОВОГО ЯЗЫКА В ВИРТУАЛЬНОЙ СРЕДЕ» иллюстрирует технологию, с помощью которой американский язык жестов (ASL) может передаваться пользователю, говорящему по-японски, с использованием японского языка жестов (JSL).

Sony заявила, что намерена создать систему, которая сможет помочь геймерам с нарушениями слуха посредством перевода жестовых языков в реальном времени во время внутриигровых разговоров. Технология, описанная в патенте, позволит виртуальным индикаторам или аватарам, отображаемым на экране, общаться на языке жестов в режиме реального времени. Система сначала преобразует жесты жестов одного языка в текст, затем преобразует текст в другой указанный язык и, наконец, переводит полученные данные в жесты жестов другого языка.

"Реализации настоящего изобретения относятся к методам и системам для захвата языка жестов одного пользователя (например, японского) и перевода языка жестов другому пользователю (например, английскому)», — описано Sony в патенте. «Поскольку языки жестов различаются в зависимости от географического происхождения, язык жестов не является универсальным. Это требует надлежащего захвата языка жестов одного пользователя, понимания родного языка и создания нового языка жестов в качестве вывода для другого пользователя на его родном языке жестов. ."

Один из способов реализации этой системы, как продемонстрировала Sony , — это использование устройства типа VR или крепления на голове. дисплей (HMD). «В некоторых реализациях HMD подключается через проводное или беспроводное соединение к пользовательскому устройству, такому как персональный компьютер, игровая консоль или другое вычислительное устройство», — пояснили в Sony . «В некоторых реализациях пользовательское устройство генерирует графику для отображения через HMD, что обеспечивает пользователю захватывающий просмотр виртуальной среды».

Sony далее предложила, чтобы одно пользовательское устройство могло беспрепятственно взаимодействовать с другим пользовательским устройством через сеть с игровым сервером. «В некоторых реализациях игровой сервер выполняет общий сеанс видеоигры, поддерживая авторитетное состояние видеоигры и ее виртуальной среды», — заявили в Sony, — «и с которыми пользовательские устройства синхронизируются относительно состояние виртуальной среды».

Благодаря этой настройке пользователи могут обмениваться файлами и взаимодействовать друг с другом в одной виртуальной среде, известной как игра, через общую сеть или сервер. Sony дополнительно заявила, что в некоторых реализациях системы игровой сервер может быть частью облачной игровой системы, которая «рендерит и передает потоковое видео» между каждым пользовательским устройством.