Патент Sony: внутриигровой переводчик языка жестов для повышения доступности для игроков с нарушениями слуха

Sony подала заявку на патент, чтобы предоставить игрокам с нарушениями слуха лучшие игровые возможности. Патент описывает технологию, которая позволяет в реальном времени переводить в играх разные языки жестов.

Использование VR-оборудования и облачных игр для перевода в реальном времени

Патент под названием «Перевод языка жестов в виртуальной среде» демонстрирует технологию, которая может переводить американский язык жестов (ASL) на японский язык жестов (JSL) в реальном времени, тем самым облегчая общение между носителями японского языка и игроками, использующими ASL. .

Цель Sony — создать систему, которая поможет игрокам с нарушениями слуха вести внутриигровые разговоры посредством перевода языка жестов в реальном времени. Технология, описанная в патенте, позволит виртуальным индикаторам или аватарам, отображаемым на экране, общаться на языке жестов в реальном времени. Система сначала переводит жесты на одном языке жестов в текст, затем преобразует текст на другой указанный язык и, наконец, переводит полученные данные в жесты на другом языке жестов.

Sony объясняет в патенте: «Варианты настоящего изобретения относятся к способам и системам для захвата языка жестов одного пользователя (например, говорящего по-японски) и перевода языка жестов другому пользователю (например, говорящему по-английски). . Поскольку языки жестов различаются в зависимости от региона, это требует надлежащего захвата языка жестов одного пользователя, понимания его родного языка и создания нового языка жестов в качестве вывода для другого пользователя»

Одним из решений, предложенных Sony, является использование VR-оборудования или головных дисплеев (HMD). Sony подробно описывает: «В некоторых вариантах реализации HMD подключается к пользовательскому устройству, такому как персональный компьютер, игровая консоль или другое вычислительное устройство, через проводное или беспроводное соединение. В некоторых вариантах реализации пользовательское устройство отображает графику, отображаемую через HMD, предоставьте пользователям захватывающий опыт просмотра в виртуальной среде »

Sony также предложила, чтобы одно пользовательское устройство могло беспрепятственно взаимодействовать с другим пользовательским устройством на игровом сервере через сеть. В Sony заявили: «В некоторых вариантах реализации игровой сервер выполняет общий сеанс видеоигры, поддерживает каноническое состояние видеоигры и ее виртуальной среды, а состояние пользовательского устройства относительно виртуальной среды синхронизируется с ним». 🎜>