소니의 획기적인 특허는 실시간 게임 내 수화 번역을 도입하여 청각 장애인의 접근성을 향상시키는 것을 목표로합니다. 이 혁신적인 기술은 다른 수화를 사용하여 플레이어 간의 커뮤니케이션 격차를 해소합니다.
소니 특허 비디오 게임에 대한 실시간 수화 변환
VR 및 클라우드 게임 기술 활용
"가상 환경에서 수화 번역"이라는 제목 의이 특허는 미국 수화 (ASL) 및 일본 수화 (JSL)와 같은 다양한 수화를 사용하는 게이머 간의 완벽한 커뮤니케이션을 가능하게하는 시스템을 자세히 설명합니다. 목표는 게임 내 상호 작용 중에 실시간 번역을 촉진하는 것입니다.
제안 된 시스템은 화면 내 가상 지표 또는 아바타를 사용하여 번역 된 수화 제스처를 표시합니다. 이 과정에는 3 단계 번역이 포함됩니다. 사인 제스처는 먼저 텍스트로 변환 된 다음 대상 언어로 변환 된 다음 마침내 대상 수화의 부호 제스처로 렌더링됩니다.
Sony는 특허에서 설명했듯이 "현재 공개의 구현은 한 사용자로부터 수화를 캡처하고 다른 사용자를 위해 다른 사용자를 위해 기본 수화로 번역하기위한 방법 및 시스템과 관련이 있습니다. 수화는 지리적으로 구체적이기 때문에이 기술은 다른 언어에서 정확한 캡처, 이해 및 수화 생성이 필요합니다."
소니는 최적의 구현을 위해 VR 헤드셋 또는 헤드 마운트 디스플레이 (HMD)를 사용하는 것을 제안합니다. 이 HMD는 사용자 장치 (PC, 게임 콘솔 등)에 연결되어 몰입 형 가상 환경을 제공합니다.
특허는 또한 사용자 장치가 서로 통신하는 네트워크 시스템과 게임 서버를 제안합니다. 이 서버는 게임 상태를 관리하여 공유 가상 환경에서 플레이어 간의 동기화를 보장합니다. Sony는 또한 클라우드 게임 시스템과 게임 서버를 통합하여 사용자 장치간에 비디오를 스트리밍 할 것을 제안합니다.
이 아키텍처는 공유 네트워크 또는 서버를 통해 동일한 게임 환경 내에서 동시 상호 작용을 가능하게하여 전 세계 청각 장애인의 접근성을 크게 향상시킵니다.
