출처:

https://www.auganix.org/xr-news-zinn-labs-announces-event-based-gaze-tracking-system-for-ai-enabled-smart-frames-and-vr-mr-systems/


Image / video credit: Zinn Labs / Prophesee / YouTube




2024년 1월 31일 - 머리에 착용하는 기기를 위한 동공 및 시선 추적 시스템을 제공하는 Zinn Labs는 증강, 가상 및 혼합 현실(AR/VR/MR) 헤드셋과 스마트 프레임을 위한 이벤트 기반 시선 추적 시스템을 출시했다고 발표했습니다.


진 랩스에 따르면 이벤트 기반 센싱의 핵심 기능은 시선추적을 위한 관련 신호를 보다 빠르고 효율적으로 캡처하는 것입니다. XR 컴퓨팅 장치가 점점 더 직관적인 사용자 인터페이스를 지향함에 따라 시선 추적은 여러 구성 요소 기술의 전제 조건이 되었습니다.


향후 몇 년 동안 XR이 인공지능(AI)의 인터페이스 역할을 할 것으로 예상되는 가운데, 스마트 아이웨어는 사용자가 AI의 이점을 누릴 수 있는 포털을 제공하면서 빠르게 부상하는 카테고리로 자리 잡고 있습니다. 진 랩에 따르면 시선은 디지털 환경과 상호작용하는 가장 자연스러운 방법이기 때문에 시선이 제공하는 주의 신호는 AI 결과물을 사용자의 의도와 원활하게 연결할 수 있습니다.


카메라를 사용한 기존의 시선추적과 진 랩스의 이벤트 기반 시선추적 비교.


진 랩스의 CEO인 케빈 보일은 다음과 같이 설명합니다: "진 랩스의 이벤트 기반 시선 추적은 비디오 기반 솔루션에 비해 대역폭을 두 배나 줄여 이전에는 비실용적이었던 애플리케이션과 폼 팩터로 확장할 수 있습니다."


진 랩스의 3D 시선 추정은 컴퓨팅 공간을 적게 차지하기 때문에 일반 안경처럼 보이는 스마트 웨어러블에서 사용할 수 있는 저전력 모드를 유연하게 지원할 수 있습니다. 또한 다른 구성에서는 고성능 애플리케이션을 위해 120Hz 이상의 속도에서 지연 시간이 짧고 미끄러짐이 없는 강력한 트래킹을 구현할 수 있다고 덧붙였습니다.


이러한 빠른 추적 속도를 얻기 위해 진 랩스는 Prophesee GenX320 센서를 활용하여 높은 재생률과 짧은 지연 시간의 시선 추적 솔루션을 제공합니다.


진 랩스 DK1 출시 예정


진 랩스 DK1 시선 지원 아이웨어 플랫폼은 양안 이벤트 기반 시선 추적 시스템과 외부 세계 카메라가 장착된 개발 키트로, 진 랩스의 3D 시선 추정 알고리즘으로 구동됩니다. Zinn Labs에 따르면 DK1에는 시중에서 판매되는 이벤트 기반 센서 중 가장 작은 크기인 Prophesee GenX320 이벤트 기반 메타비전 센서가 장착되어 있습니다.


"프레임 기반 수집 기술은 실용적이고 사실적인 사용자 경험을 제공하는 AR/MR 웨어러블 및 헤드셋의 속도, 짧은 지연 시간, 크기, 전력 요구 사항을 충족하지 못합니다."라고 Prophesee의 CEO이자 공동 설립자인 루카 베레(Luca Verre)는 말합니다. "GenX320은 이러한 실시간 및 처리 효율성 요구 사항을 염두에 두고 특별히 개발되었으며, 진 랩스의 획기적인 AR/MR 플랫폼으로 구현될 다양한 제품에 이벤트 기반 비전의 장점을 제공합니다."




https://youtu.be/Qq2doSC7-ng



진 랩스는 DK1이 1° 미만의 미끄러짐에 강한 시선 추적 정확도를 지원하며 120Hz에서 10ms의 엔드투엔드 지연 시간으로 작동한다고 덧붙였습니다. 개발 키트에는 웨어러블 AI 어시스턴트(위 그림)를 포함한 데모 애플리케이션도 함께 제공되며, 성능 평가 또는 고객 개념 증명 통합 프로젝트에 사용할 수 있습니다.


진 랩스는 이번 주 캘리포니아 샌프란시스코에서 열리는 SPIE AR | VR | MR 2024에서 기술을 발표하고 DK1을 시연할 예정입니다. 진 랩스와 진 랩스의 XR 기기용 시선 추적 솔루션에 대한 자세한 내용은 여기를 클릭하세요.

http://www.zinnlabs.com/