게임 내 수화 번역기는 Sony 특허의 장벽을 허물었습니다.

Sony 특허: 게임 내 수화 번역기를 사용하면 청각 장애가 있는 플레이어도 게임을 즐길 수 있습니다! 소니가 청각 장애가 있는 게이머에게 더 나은 게임 경험을 제공하기 위해 특허를 출원했습니다. 해당 특허는 게임 내 수화를 실시간으로 번역할 수 있는 기술을 보여준다.

VR장비와 클라우드 게임을 활용한 실시간 수화 번역

'가상 환경에서의 수화 번역'이라는 제목의 소니 특허에는 미국 수화(ASL)를 일본 수화(JSL)로 실시간 번역하여 일본 플레이어가 ASL 플레이어 커뮤니케이션을 보다 쉽게 ​​사용할 수 있도록 하는 기술이 설명되어 있습니다. .

소니는 게임 내 수화 대화를 실시간으로 번역하여 청각 장애가 있는 플레이어를 돕는 시스템을 구축하는 것을 목표로 합니다. 특허에 설명된 기술을 통해 화면에 표시되는 가상 표시기나 아바타가 실시간으로 수화로 의사소통할 수 있습니다. 시스템은 먼저 한 언어의 제스처를 텍스트로 번역한 다음 텍스트를 지정된 다른 언어로 변환하고 마지막으로 수신된 데이터를 다른 언어의 제스처로 번역합니다.

"본 개시의 실시예는 한 사용자(예: 일본인)의 수화를 캡처하고 이를 다른 사용자(예: 영어 사용자)에게 번역하는 방법 및 시스템에 관한 것입니다."라고 Sony는 설명합니다. 특허. "수화는 지역에 따라 다르기 때문에 수화는 보편적이지 않습니다. 이를 위해서는 한 사용자의 수화를 적절하게 캡처하고, 모국어를 이해하고, 다른 사용자를 위한 출력으로 모국어 수화를 생성해야 합니다.

소니는 이 시스템을 구현하는 한 가지 방법이 VR 장비나 헤드마운트디스플레이(HMD)를 활용하는 것이라고 설명했습니다. "일부 실시예에서 HMD는 유선 또는 무선 연결을 통해 개인용 컴퓨터, 게임 콘솔 또는 기타 컴퓨팅 장치와 같은 사용자 장치에 연결됩니다."라고 Sony는 자세히 설명합니다. "일부 구현에서는 사용자 장치가 HMD를 통해 표시되는 그래픽을 렌더링하여 사용자에게 가상 환경에 대한 몰입형 시청 경험을 제공합니다."

소니는 또한 하나의 사용자 장치가 네트워크를 통해 게임 서버의 다른 사용자 장치와 원활하게 통신할 수 있다고 제안했습니다. "일부 실시예에서 게임 서버는 비디오 게임의 공유 세션을 수행하고, 비디오 게임과 가상 환경의 정식 상태를 유지하며, 가상 환경과 관련된 사용자 장치의 상태는 동기화됩니다."라고 Sony는 말했습니다.

이 설정을 통해 사용자는 공유 네트워크 또는 서버의 동일한 가상 환경(예: 게임)에서 공유하고 상호 작용할 수 있습니다. 소니는 또한 시스템의 일부 구현에서 게임 서버가 각 사용자 장치 간에 "비디오를 렌더링하고 스트리밍"하는 클라우드 게임 시스템의 일부가 될 수 있다고 말했습니다.