Sony Trình dịch ngôn ngữ ký hiệu trong trò chơi bằng sáng chế

Bằng sáng chế của Sony: Trình dịch ngôn ngữ ký hiệu trong trò chơi cho phép người chơi câm điếc chơi trò chơi!

Sony đã nộp bằng sáng chế nhằm mang lại trải nghiệm chơi game tốt hơn cho các game thủ câm điếc. Bằng sáng chế chứng minh công nghệ có thể dịch một ngôn ngữ ký hiệu sang ngôn ngữ ký hiệu khác trong trò chơi theo thời gian thực.

Sử dụng thiết bị VR và trò chơi đám mây để đạt được khả năng dịch thuật theo thời gian thực

Bằng sáng chế của Sony, có tiêu đề “Dịch ngôn ngữ ký hiệu trong môi trường ảo”, mô tả công nghệ có thể dịch Ngôn ngữ ký hiệu của Mỹ (ASL) sang Ngôn ngữ ký hiệu tiếng Nhật (JSL) trong thời gian thực để người nói tiếng Nhật hiểu được.

Sony đặt mục tiêu xây dựng một hệ thống hỗ trợ người chơi khiếm thính bằng cách dịch đoạn hội thoại bằng ngôn ngữ ký hiệu trong trò chơi theo thời gian thực. Công nghệ được mô tả trong bằng sáng chế sẽ cho phép giao tiếp bằng ngôn ngữ ký hiệu theo thời gian thực thông qua chỉ báo ảo hoặc hình đại diện hiển thị trên màn hình. Trước tiên, hệ thống dịch cử chỉ trong một ngôn ngữ thành văn bản, sau đó chuyển đổi văn bản sang ngôn ngữ được chỉ định khác và cuối cùng dịch dữ liệu nhận được sang cử chỉ bằng ngôn ngữ khác.

"Các phương án của sáng chế liên quan đến các phương pháp và hệ thống để ghi lại ngôn ngữ ký hiệu của một người dùng (ví dụ: người Nhật) và dịch ngôn ngữ ký hiệu cho người dùng khác (ví dụ: người nói tiếng Anh)" Sony mô tả trong bằng sáng chế. "Vì ngôn ngữ ký hiệu khác nhau tùy theo nguồn gốc khu vực nên ngôn ngữ ký hiệu không phổ biến. Điều này đòi hỏi phải nắm bắt ngôn ngữ ký hiệu của một người dùng một cách thích hợp, hiểu ngôn ngữ mẹ đẻ của họ và tạo ngôn ngữ ký hiệu mới cho người dùng khác làm đầu ra bằng ngôn ngữ ký hiệu mẹ đẻ của họ. "

Sony đưa ra ví dụ rằng hệ thống có thể được triển khai thông qua thiết bị VR hoặc màn hình gắn trên đầu (HMD). Sony cho biết: “Trong một số phương án, HMD kết nối với thiết bị người dùng, chẳng hạn như máy tính cá nhân, bảng điều khiển trò chơi hoặc thiết bị điện toán khác, thông qua kết nối có dây hoặc không dây”. "Trong một số phương án, thiết bị người dùng hiển thị đồ họa được hiển thị thông qua HMD, mang đến cho người dùng trải nghiệm xem phong phú về môi trường ảo

Sony còn đề xuất thêm rằng một thiết bị người dùng có thể giao tiếp liền mạch với một thiết bị người dùng khác trên máy chủ trò chơi thông qua mạng. Sony cho biết: “Trong một số phương án, máy chủ trò chơi thực hiện phiên chia sẻ của trò chơi điện tử, duy trì trạng thái chuẩn của trò chơi điện tử và môi trường ảo của nó,” Sony cho biết, “và trạng thái của thiết bị người dùng đối với môi trường ảo được đồng bộ hóa.”

Với thiết lập này, người dùng có thể chia sẻ và tương tác với nhau trong cùng một môi trường ảo (tức là trò chơi) trên mạng hoặc máy chủ dùng chung. Sony cũng cho biết trong một số triển khai hệ thống, máy chủ trò chơi có thể là một phần của hệ thống trò chơi đám mây có thể "kết xuất và truyền phát video" giữa mỗi thiết bị người dùng.