Trình dịch ngôn ngữ ký hiệu trong trò chơi phá vỡ rào cản trong Sony Bằng sáng chế

Bằng sáng chế của Sony: Trình dịch ngôn ngữ ký hiệu trong trò chơi cho phép người chơi câm điếc chơi trò chơi! Sony đã nộp đơn xin cấp bằng sáng chế nhằm mang lại trải nghiệm chơi game tốt hơn cho các game thủ khiếm thính. Bằng sáng chế chứng minh công nghệ có thể dịch ngôn ngữ ký hiệu trong trò chơi theo thời gian thực.

Sử dụng thiết bị VR và trò chơi đám mây để đạt được khả năng dịch ngôn ngữ ký hiệu theo thời gian thực

Bằng sáng chế của Sony, có tiêu đề "Dịch ngôn ngữ ký hiệu trong môi trường ảo", mô tả công nghệ có thể dịch Ngôn ngữ ký hiệu của Mỹ (ASL) sang Ngôn ngữ ký hiệu tiếng Nhật (JSL) trong thời gian thực, giúp người chơi Nhật Bản sử dụng giao tiếp với người chơi ASL dễ dàng hơn .

Sony đặt mục tiêu xây dựng một hệ thống hỗ trợ người chơi khiếm thính bằng cách dịch đoạn hội thoại bằng ngôn ngữ ký hiệu trong trò chơi theo thời gian thực. Công nghệ được mô tả trong bằng sáng chế sẽ cho phép các chỉ báo ảo hoặc hình đại diện hiển thị trên màn hình giao tiếp bằng ngôn ngữ ký hiệu trong thời gian thực. Trước tiên, hệ thống dịch cử chỉ trong một ngôn ngữ thành văn bản, sau đó chuyển đổi văn bản sang ngôn ngữ được chỉ định khác và cuối cùng dịch dữ liệu nhận được sang cử chỉ bằng ngôn ngữ khác.

"Các phương án của sáng chế liên quan đến các phương pháp và hệ thống để ghi lại ngôn ngữ ký hiệu của một người dùng (ví dụ: người Nhật) và dịch ngôn ngữ ký hiệu cho người dùng khác (ví dụ: người nói tiếng Anh)" Sony mô tả trong bằng sáng chế. "Vì ngôn ngữ ký hiệu khác nhau tùy theo nguồn gốc khu vực nên ngôn ngữ ký hiệu không phổ biến. Điều này đòi hỏi phải nắm bắt ngôn ngữ ký hiệu của một người dùng một cách thích hợp, hiểu ngôn ngữ mẹ đẻ của họ và tạo ngôn ngữ ký hiệu mẹ đẻ của họ làm đầu ra cho người dùng khác."

Sony giải thích rằng một cách để triển khai hệ thống này là nhờ sự trợ giúp của thiết bị VR hoặc màn hình gắn trên đầu (HMD). Sony cho biết: “Trong một số phương án, HMD kết nối với thiết bị người dùng, chẳng hạn như máy tính cá nhân, bảng điều khiển trò chơi hoặc thiết bị điện toán khác, thông qua kết nối có dây hoặc không dây”. "Trong một số triển khai, thiết bị người dùng hiển thị đồ họa được hiển thị thông qua HMD, cung cấp cho người dùng trải nghiệm xem môi trường ảo sống động

."

Sony còn đề xuất thêm rằng một thiết bị người dùng có thể giao tiếp liền mạch với một thiết bị người dùng khác trên máy chủ trò chơi thông qua mạng. Sony cho biết: “Trong một số phương án, máy chủ trò chơi thực hiện một phiên chia sẻ của trò chơi điện tử, duy trì trạng thái chuẩn của trò chơi điện tử và môi trường ảo của nó,” Sony cho biết, “và trạng thái của thiết bị người dùng đối với môi trường ảo được đồng bộ hóa.”

Với thiết lập này, người dùng có thể chia sẻ và tương tác trong cùng một môi trường ảo (tức là trò chơi) trên mạng hoặc máy chủ dùng chung. Sony cũng cho biết trong một số triển khai của hệ thống, máy chủ trò chơi có thể là một phần của hệ thống trò chơi đám mây giúp "kết xuất và truyền phát video" giữa mỗi thiết bị người dùng.