https://www.youtube.com/watch?v=XvNLNkfQY7Q&feature=youtu.be

안경에 장착된 최초의 음향 기반 시선추적 시스템인 GazeTrak을 소개합니다. 이 시스템은 안경 양쪽에 하나의 스피커와 4개의 마이크만 부착하면 됩니다. 이 음향 센서는 인코딩된 비가청 사운드를 안구를 향해 방출하고 반사된 신호를 수신하여 안구의 형상과 주변 영역을 포착합니다. 이렇게 반사된 신호를 추가로 처리하여 에코 프로파일을 계산하고, 이를 맞춤형 딥러닝 파이프라인에 공급하여 시선 위치를 지속적으로 추론합니다. 20명의 참가자를 대상으로 한 사용자 연구에서 GazeTrak은 83.3Hz의 재생률과 287.9mW의 전력 시그니처로 동일한 재장착 세션 내에서 3.6°, 다른 세션에서 4.9°의 정확도를 달성했습니다. 또한 저전력 CNN 가속기(MAX78002)가 장착된 MCU에서 완벽하게 구현된 시선 추적 시스템의 성능을 보고합니다. 이 구성에서 시스템은 최대 83.3Hz에서 실행되며 30Hz FPS에서 총 전력 시그니처는 95.4mW입니다.