https://panora.tokyo/archives/61026
2023년 1월 28일(토), 주식회사 NTT QONOQ(이하, 코노큐)는 요코하마시 주최의 「YOXO FESTIVAL 2023~요코하마에서 미라이 체험~」에서, 퀸즈 스퀘어 요코하마에서 실시간으로 Volumetric Video※1을 전달 하는 기술을 이용한 3D 영상의 인터랙티브 이벤트(이하, 본 이벤트)를 실시합니다. 본 이벤트는, MM스마트 솔루션·컨소시엄 실행 위원회※2가 실시하는 「MM스마트 솔루션 프로그램※3」에 있어서 채택된 미나토미라이 21 지구에서의 5G통신과 연동한 엔터테인먼트 컨텐츠의 전개를 전망한 실증 실험이 됩니다 .
본 이벤트에서는 원격 스튜디오에서 강사가 댄스 레슨을 실시해, 이것을 Volumetric Video 데이터화해, 이 대용량 데이터를 5 G를 이용해 전송, 퀸즈 스퀘어 요코하마의 복수의 학생에게 전달합니다. 따라서 학생들이 보통 어려운 위치 각도로부터 강사의 기술을 확인할 수 있어 기술의 습득·창작 의욕의 확대를 기대할 수 있습니다. 또한 실시간으로 실시함으로써 일방통행 시청이 아닌 인터랙티브한 레슨이 가능해 강사와 학생이 하나가 되어 작품을 만들어낼 수 있습니다.
본 이벤트에서는, 통상 오프라인으로 행해지는 촬영 데이터의 편집을 실시간으로 실시합니다. 게다가 독자 개발한 연출 부여 플레이어※4를 이용하는 것으로, 리얼타임 전송에서는 통상 동기할 수 없는 Volumetric Video 데이터와 CG 데이터의 동기를 가능하게 하고, 리얼타임 전달에도 연자의 동작에 맞춘 연출을 실시하는 것이 가능해진다 합니다. 이러한 노력을 통해 Volumetric Video의 제공 가치가 증가하는지 확인합니다.
▼연출 부여 플레이어에서의 연출 부여 이미지(흰 선이 연자의 동작에 맞추어 변화)
고도의 네트워크에 의한 XR의 세계를 추구해, 네트워크를 축으로 가상과 현실을 오가는 세계의 실현을 목표로 하고 있는 코노큐는, 5G 네트워크와 XR을 조합하는 것에 의해 태어나는 새로운 세계의 하나로서 Volumetric Video의 생성· 배달에 임해 왔습니다. 향후 코노큐에서는 이 Volumetric Video 기술을 활용하여 세계를 향해 새로운 표현을 전달하는 것을 목표로 합니다.
※1 Volumetric Video란, 실재의 사람, 그 사람의 동작 등을 복수의 카메라로 촬영해, 3D데이터를 생성하는 것, 또 그 기술입니다. 3D 데이터이므로, 자유로운 위치·각도로부터 자유로운 시점의 영상을 볼 수 있습니다. 3D 데이터를 활용한 MR/VR/AR 컨텐츠 등 다양한 출력을 제공할 수 있습니다.
※2 미나토미라이 21 지구를 최첨단 기술의 트라이얼이 날마다 행해지는 미래 도시로 가기 위해, 산학 공민의 혁신 창출의 제휴 기반 「요코하마 미래 기구」와 연동해 실증 실험의 지원 등의 활동을 실시하고 있습니다 .
※3본 프로그램은, 미나토미라이 21 지구의 거리의 매력 향상을 향해, 활기찬 형성이나 비즈니스 기회의 창출, 안심·안전한 마을 만들기 등, 창의 궁리에 의한 자주적인 활동을 실시하는 단체 또는 법인에 대한 조성 제도 “공익 신탁 미나토 미라이 21 마을 만들기 트러스트」를 활용해 실시하고 있습니다.
※4연출 부여 플레이어란, Volumetric Video에 이펙트 등을 부가하는 소프트입니다. 임의의 이펙트를 부가하는 것에 더해, 모델의 움직임의 시간 동기·공간 동기를 실시하는 것으로, Volumetric Video의 엔터테인먼트성을 높일 수가 있습니다.
