소니 뮤직 솔루션즈, 소니 반도체 솔루션즈와 공동 사업, 'ToF AR Pro' SDK 라이선스 판매 개시

출처:

https://prtimes.jp/main/html/rd/p/000000050.000061313.html

깊이 정보에 의한 매핑으로 아바타의 전신부터 손가락까지 사실적인 제스처 콘트롤 구현 전력 소비, 발열을 억제하고 스마트폰 앱에 구현 가능

소니 뮤직 솔루션즈 주식회사

소니 뮤직 솔루션즈 기업 웹사이트에 『ToF AR』 소개 페이지 공개

공식 웹사이트는 2024년에 더 자세한 정보 제공 예정

소니 뮤직 솔루션즈 주식회사(본사: 도쿄도 미나토구, 대표이사: 오오타니 히데히코, 이하 SMS)는 소니 반도체 솔루션즈 주식회사(본사: 가나가와현 아쓰기시, 대표이사 사장 겸 CEO: 시미즈 테루시, 이하 SSS)가 개발한 'ToF AR Pro' SDK(Software Development Kit, 이하 SDK)의 라이선스 판매를 개시한다. Software Development Kit, 이하 SDK)의 라이선스 판매를 개시한다.

■거리 정보를 수집할 수 있는 센서를 사용하여, 가까운 거리에 있는 스마트폰으로 지금까지 없었던 경험을 전달하고 싶다.

스마트폰용 소프트웨어 개발 키트 'ToF AR Pro'란?

"ToF"는 Time of Flight(비행 시간)의 약자로, 말 그대로 빛의 비행 시간을 이용하는 방식이다. 빛을 날려서 반사되어 돌아오기까지의 시간을 측정하여 물체까지의 깊이 정보, 이른바 '깊이'를 얻을 수 있는 기술로, 현재는 주로 자동차의 자동 운전이나 공장의 자동화 등에 사용되고 있다.

이 기술을 가장 친숙한 도구인 스마트폰용 XR에 적용해 지금까지 경험하지 못한 새로운 경험을 선사하고 싶다. 이런 생각으로 SSS가 개발한 것이 'ToF AR Pro' SDK입니다.

"ToF AR Pro는 스마트폰에 탑재된 거리 정보를 취득할 수 있는 센서 정보와 독자적인 AI 처리 기술을 통해 가상공간 오브젝트의 사실적인 깊이 정보를 통한 매핑과 전신, 상체, 손, 손가락까지 관절을 인식하여 정확한 제스처 트래킹으로 아바타 컨트롤을 실현할 수 있습니다. 를 구현할 수 있습니다. 특히 핸드 트래킹은 매우 매끄럽고, 위치, 손가락 방향 등 조작자의 움직임 특징을 포착해 3차원적으로 재현할 수 있다. 조작이 간편하고 아바타의 움직임이 사실적으로 표현된다는 장점뿐만 아니라, 제스처를 활용한 게임이나 이펙트 등 기존에 없던 연출이나 아이디어를 앱 개발에 활용할 수 있게 된다.

거리 정보를 얻을 수 있는 센서의 정보는 태양이나 조명, 옷 색깔 등 주변 환경의 영향을 받지 않는다. 일반 이미지 센서보다 정보 수집량을 줄이고, 비교적 간단한 AI 처리로 고정밀 인식이 가능하여 전력 소비와 발열을 줄일 수 있다. 이를 통해 스마트폰에 활용할 수 있게 되었다.

'ToF AR Pro'를 XR, 게임, 메타버스 앱 등의 개발에 활용하여 가상세계의 새로운 문을 열어보는 것은 어떨까요? 또한, 심도 정보가 친숙한 세상이 되어 새로운 커뮤니케이션, 의료, 교육 등 지금까지 없었던 분야에서 활용될 수 있을 것으로 기대합니다.

■ToF AR Pro의 특징

1. 진화된 심도 정보를 통한 매핑

ToF AR Pro의 진화한 깊이 정보를 통한 매핑은 가상공간 객체의 디테일과 위치를 보다 정확하게 포착하여 가상공간의 리얼리티를 향상시킵니다.

2. 핸드 트래킹

상체, 손, 손가락 관절의 위치를 인식하고 추적할 수 있다. 상체를 인식함으로써 카메라 영상 밖에서도 손을 인식하여 아바타 제어 및 상체 인식을 추적할 수 있다.

3. Unity로 개발 가능

Unity에 ToF AR Pro SDK를 탑재하여 거리 정보를 획득할 수 있는 센서를 이용한 모바일 XR 앱을 쉽게 개발할 수 있습니다. 게임, 앱 개발, 영상 제작 등 엔터테인먼트 영역에서 폭넓게 활용할 수 있습니다.