녹색 선으로 연결된 점들은 일치하다고 판단되는 지점들을 서로 선으로 연결한 것입니다.

기존의 프레임간 추정 (SuperGlue)

Virtual Correspondences

https://news.mit.edu/2022/seeing-whole-from-some-parts-0617

https://virtual-correspondence.github.io/

https://www.youtube.com/watch?v=LSBz9-TibAM

2차원 이미지에서 3차원 장면을 재구성하는 기술입니다.

기존 기술의 경우 두 이미지가 겹치는 부분이 많을 경우에만 제대로 작동하고 관점의 차이가 너무 클 경우에는 실패하는 경우가 잦습니다.

이 기술의 경우 미리 어느정도 학습된 데이터를 통하여 현재 보이고 있는 지점의 반대편을 추정하고 다른 관점의 이미지에서 해당 부분을 찾아 연결하고 추론해내는 방식입니다.

https://virtual-correspondence.github.io/

여기서 더 많은 예시와 3D로 재구성된 장면들을 확인해볼 수 있습니다.