xxlong0/Wonder3D

개요 단일 이미지에서 크로스 도메인 디퓨전 모델을 이용해 3D 모델을 생성하는 연구 프로젝트다. 한 장의 사진만으로 완전한 3D 오브젝트를 재구성할 수 있다.

핵심 내용 Cross-Domain Diffusion 기법을 활용해 단일 RGB 이미지에서 멀티뷰 이미지와 노멀 맵을 동시에 생성하고, 이를 바탕으로 3D 메시를 재구성한다. NeRF나 Gaussian Splatting과 달리 단일 이미지만으로 3D 생성이 가능하다. 5,300+ stars를 기록한 주목받는 3D 생성 연구다.

기존 대비 차별점 기존 이미지-to-3D 방법들은 다수의 뷰 이미지가 필요하거나 품질이 낮았다. Wonder3D는 크로스 도메인 어텐션 메커니즘으로 기하학적으로 일관된 멀티뷰를 생성해 고품질 3D 재구성을 달성한다.

활용 가능성 e커머스 상품 3D 모델 자동 생성, 게임 에셋 제작, AR/VR 콘텐츠 제작, 3D 프린팅용 모델 생성 등 단일 이미지에서 3D 에셋이 필요한 다양한 분야에 활용할 수 있다.

참고 자료 - 원본