https://twitter.com/_akhaliq/status/1738252930178850852
요약
AR/VR 애플리케이션을 위한 3D 환경을 수동으로 제작하는 것은 3D 모델링 소프트웨어에 대한 전문 지식이 필요한 복잡한 과정입니다. 선구적인 연구들은 텍스트 스타일 설명을 기반으로 룸 메시를 생성하여 이 프로세스를 용이하게 합니다. 하지만 이렇게 자동으로 생성된 3D 메시 중 상당수는 일반적인 방의 레이아웃을 따르지 않아서 한 침실에 여러 개의 침대를 배치하는 등 타당성이 떨어집니다. 이러한 문제를 해결하기 위해 우리는 고품질 룸 메시를 생성하는 새로운 방법인 ControlRoom3D를 선보입니다. 이 접근 방식의 핵심은 시맨틱 바운딩 박스와 전체 룸 스타일에 대한 텍스트 설명을 기반으로 대략적인 룸 레이아웃의 윤곽을 그리는 사용자 정의 3D 시맨틱 프록시 룸입니다. 우리의 핵심 인사이트는 이 3D 표현이 2D로 렌더링될 때 강력한 2D 모델을 제어하여 프록시 룸과 잘 일치하는 3D 일관된 텍스처와 지오메트리를 생성하는 데 유용한 기하학적 및 시맨틱 정보를 제공한다는 점입니다. 정량적 지표와 정성적 사용자 평가를 포함한 광범위한 연구를 통해 뒷받침되는 우리의 방법은 다양하고 전 세계적으로 그럴듯한 3D 룸 메시를 생성하여 사용자가 전문 지식 없이도 손쉽게 3D 룸을 디자인할 수 있도록 지원합니다.
