https://exputer.com/news/industry/sony-patent-notify-users/


대기업은 3D 오디오 및 동적 알림에 대해 여러 특허를 발표했습니다.


스토리 하이라이트


  • Sony는 사용자가 경험에 몰입할 때 VR 헤드셋이 접근하는 물체를 인식하는 기능을 추가하려는 새로운 특허를 발표했습니다.
  • VR 헤드셋은 동적 3D 오디오 시스템을 사용하여 근처에 있는 사람이나 동물을 사용자에게 알릴 수 있습니다.
  • Sony는 또한 동적 알림 팝업 시스템을 사용하여 사용자에게 위험을 경고하려는 또 다른 특허에 대해 논의합니다. 
  • 우리는 미래의 새로운 PSVR 2 모델 또는 후속 헤드셋에서 논의된 특허의 구현을 볼 수 있습니다.


Sony는 최근 VR 헤드셋을 사용하여 사용자 영역을 스캔하는 방법에 대한 두 개의 특허를 발표했습니다. 환경을 스캔하고 외부인이 지정된 영역에 들어가면 사용자에게 위험을 알리는 알림이 표시됩니다. 위험은 애완동물, 아기 또는 게임 플레이 세션 동안 TV에 너무 가까이 걸어가는 사용자 주변의 다른 사람일 수 있습니다. 플레이하는 동안 사용자가 실제 환경을 인식하도록 하기 위한 것입니다. 


특허는 갑자기 사고로 이어질 수 있는 임박한 위험을 사용자에게 경고함으로써 딜레마를 해결하려고 시도할 것입니다. 최초의 법적 문서 인 " 3D AUDIO FOR DETECTING OBJECTS IN DANGER ZONES AROUND VR PLAYERS "는 사용자가 VR 게임을 즐기는 동안 충돌할 수 있는 모든 개체를 발견한 후 3D 오디오를 재생합니다. 오디오는 개인 공간에 어떤 것이 들어오는지 사용자에게 동적으로 알려줍니다.


https://patentscope.wipo.int/search/en/detail.jsf?docId=US393705458&_cid=P10-LFE03V-97835-2


증강 현실, 혼합 현실 또는 가상 현실 시뮬레이션 중에 3차원(3D) 오디오를 제공하여 실제 개체가 사용자가 상호 작용할 상호 작용 공간의 경계에 접근하거나 교차했음을 사용자에게 알릴 수 있습니다. 시뮬레이션과 함께. 3D 오디오는 침입 또는 경계의 현재 위치를 나타내면서 사용자를 시뮬레이션에 계속 몰입하게 할 수 있습니다.”

3D 오디오는 차임 또는 톤을 포함할 수 있으며 컴퓨터 생성 음성의 전망도 특허에서 논의됩니다. 또한 오디오 볼륨은 침입 수준에 따라 크게 다를 수 있습니다. 예를 들어 위험한 물체가 주변 외곽에 있는 경우 위험 수준을 반영하기 위해 볼륨을 부드럽게 할 수 있습니다. 실제 개체 슬레이트가 사용자의 개인 공간에 더 가까워짐에 따라 볼륨을 높이는 것도 가능합니다.


헤드셋의 3D 오디오 시스템 예시 시스템의 블록 다이어그램.


마찬가지로 차임벨의 빈도는 사용자와 충돌할 수 있는 실제 개체의 거리에 따라 달라질 수 있습니다. Sony는 또한 사용자가 비디오 게임이나 기타 혼합 현실 경험에 몰입하는 동안 어느 정도 구별할 수 있도록 다양한 개체에 대해 서로 다른 3D 오디오를 재생하는 방법에 대해 설명합니다. 오디오의 볼륨과 주파수는 예기치 않게 사용자를 공격할 수 있는 개체의 크기에 따라 변경될 수도 있습니다.


이미지는 게임 및 알림 예제를 플레이하는 동안 상호 작용 영역 내에 서 있는 사용자를 보여줍니다.


3D 오디오는 사용자 또는 게임 내 캐릭터의 음성을 활용하여 플레이어에게 잠재적인 위험을 알릴 수 있습니다. 예를 들어 Sony는 아기를 정확하게 발견하여 뒤에 있는 아이를 사용자에게 알리기 위해 " 당신의 아들이 당신 뒤에 있습니다 " 라는 알림의 예를 사용합니다 . 이 특허는 매혹적인 기술을 구현하기 위해 AI 모델을 사용하는 것에 대해 논의합니다.


이미지는 구성 가능한 설정을 보여줍니다.



Sony의 특허는 현재 VR 세션에 몰입한 사용자가 실제 침입을 처리하기 위해 경험을 중지하거나 일시 중지할 필요가 없도록 하는 것입니다. 이는 일반적으로 VR 사용자가 현재 환경을 처리하는 방식입니다. 게임을 즐기는 동안 VR 헤드셋을 벗으면 몰입감이 깨지고 사용자 경험이 방해를 받습니다. 따라서 3D 오디오는 사용자에게 잠재적인 위험을 동적으로 경고함으로써 헤드셋을 벗을 필요가 없습니다.


소니가 공개한 두 번째 특허인 " 가상 또는 증강 현실 장면의 동적 알림 표면화"  도 유사한 혁신에 대해 논의하지만 3D 오디오 대신 동적 알림 팝업 시스템을 사용하여 사용자에게 경고하려고 합니다. 경고는 현재 VR 세션에 몰입한 플레이어에게 접근할 수 있는 그래픽 개체를 나타내는 텍스트 또는 텍스트가 아닌 거품을 사용할 수 있습니다.


https://patentscope.wipo.int/search/en/detail.jsf?docId=US393705454&_cid=P10-LFE03V-97835-2


증강 현실, 혼합 현실 또는 가상 현실 시뮬레이션 중에 텍스트가 아닌 알림 풍선 또는 기타 그래픽 개체를 표시하여 실제 개체가 접근하고 있거나 사용자가 있는 상호 작용 공간의 경계를 넘었음을 사용자에게 알릴 수 있습니다. 시뮬레이션과 상호 작용하는 것입니다.”


동적 알림 풍선은 사용자가 할당된 시간 내에 응답하지 않으면 일정 시간이 지난 후 여러 번 팝업될 수 있습니다. 다음 경고에는 충돌할 수 있는 다가오는 위험을 사용자에게 알려주는 햅틱 피드백이 포함될 수도 있습니다. Sony는 사용자에게 접근하는 하나 이상의 실제 물체를 감지하는 방법에 대해 논의하고 사용자가 물체를 치우거나 다른 영역으로 이동하여 물체를 처리하면 경고가 중지됩니다.


이미지는 동적 알림 시스템의 흐름도 구현을 보여줍니다.



사용자가 헤드셋을 벗지 않고 주변에 침입한 침입자를 처리함에 따라 게임 또는 가상 콘텐츠가 느려질 수 있습니다. 첫 번째 특허에 설명된 대로 Sony는 동일한 문제를 해결하려고 하지만 다른 스타일의 알림을 적용합니다.


우리는 소니가 미래의 PSVR 2 모델이나 미래를 위해 계획된 헤드셋에 혁신적인 기술을 구현할 것으로 기대할 수 있습니다. 게이머 및 기타 대상 고객이 현재 VR 및 AR 기술을 사용하는 방식에 혁명을 일으킬 수 있습니다.