HengyiWang/amb3r

개요 AMB3R은 CVPR 2026에 채택된 연구로, 멀티뷰 이미지로부터 실제 물리적 스케일(metric-scale)이 정확한 3D 복원을 피드포워드 방식으로 수행하는 시스템이다. 백엔드 최적화 모듈을 결합하여 정확도와 속도를 동시에 확보한다.

핵심 내용 3D 복원에서 메트릭 스케일을 정확히 추정하는 것은 오랜 난제다. 단안 깊이 추정은 상대적 깊이만 제공하고, SfM 기반 방식은 최적화에 긴 시간이 소요된다. AMB3R은 피드포워드 네트워크로 빠르게 초기 3D 복원을 생성한 뒤, 경량화된 백엔드 모듈이 메트릭 스케일의 정합성을 보정하는 하이브리드 구조를 채택했다. 이를 통해 반복적 최적화 없이도 실세계 단위의 정확한 3D 모델을 얻을 수 있다.

기존 대비 차별점 피드포워드의 속도와 최적화 기반 방법의 정확도를 결합한 아키텍처가 핵심이다. DUSt3R 등 기존 피드포워드 모델들이 스케일 모호성 문제를 안고 있었다면, AMB3R은 백엔드 보정 단계를 통해 이를 해결한다. 별도의 센서(LiDAR, IMU) 없이 이미지만으로 메트릭 스케일을 달성한다는 점에서 실용성이 높다.

활용 가능성 AR 콘텐츠 배치, 로봇 매니퓰레이션, 실내 공간 측정 등 정확한 물리적 크기가 필요한 응용에 바로 적용 가능하다. 드론 기반 건설 현장 모니터링이나 문화재 디지털 아카이빙처럼 센서 장비가 제한된 환경에서 카메라만으로 정밀 3D 모델을 구축하는 시나리오에 특히 유용하다.

참고 자료 - GitHub 저장소 ===