Paten Sony: Penterjemah bahasa isyarat dalam permainan untuk meningkatkan kebolehcapaian bagi pemain bermasalah pendengaran

Sony telah menyerahkan permohonan paten untuk memberikan pemain cacat pendengaran pengalaman permainan yang lebih baik. Paten itu menerangkan teknologi yang boleh menterjemah bahasa isyarat yang berbeza dalam masa nyata dalam permainan.

Menggunakan peralatan VR dan permainan awan untuk mencapai terjemahan masa nyata

Paten, bertajuk "Terjemahan Bahasa Isyarat dalam Persekitaran Maya," menunjukkan teknologi yang boleh menterjemah Bahasa Isyarat Amerika (ASL) ke Bahasa Isyarat Jepun (JSL) dalam masa nyata, dengan itu memudahkan komunikasi antara penutur Jepun dan pemain menggunakan ASL. .

Matlamat Sony adalah untuk membina sistem untuk membantu pemain bermasalah pendengaran dalam menjalankan perbualan dalam permainan melalui terjemahan masa nyata bahasa isyarat. Teknologi yang diterangkan dalam paten akan membolehkan penunjuk maya atau avatar yang dipaparkan pada skrin untuk berkomunikasi dalam bahasa isyarat dalam masa nyata. Sistem mula-mula menterjemah gerak isyarat dalam satu bahasa isyarat ke dalam teks, kemudian menukar teks ke bahasa lain yang ditentukan, dan akhirnya menterjemah data yang diterima ke dalam gerak isyarat dalam bahasa isyarat lain.

Sony menerangkan dalam paten: “Penjelmaan pendedahan semasa berkaitan dengan kaedah dan sistem untuk menangkap bahasa isyarat seorang pengguna (cth., penutur Jepun) dan menterjemahkan bahasa isyarat kepada pengguna lain (cth., penutur bahasa Inggeris) . Memandangkan bahasa isyarat berbeza mengikut asal serantau, ini memerlukan menangkap bahasa isyarat seseorang pengguna, memahami bahasa ibunda mereka dan menghasilkan bahasa isyarat baharu sebagai output untuk pengguna lain

.

Dengan persediaan ini, pengguna boleh berkongsi dan berinteraksi dengan persekitaran maya yang sama (iaitu permainan) pada rangkaian atau pelayan kongsi. Sony juga menambah bahawa dalam beberapa penjelmaan sistem, pelayan permainan boleh menjadi sebahagian daripada sistem permainan awan yang boleh "membuat dan menstrim video" antara setiap peranti pengguna.