A client hands you a single, cluttered photo of their living room and asks what it would look like r

개요 단 한 장의 2D 사진을 입력하면 가구를 개별 3D 에셋으로 분리하고, 소파 뒷면처럼 보이지 않는 부분까지 자동 완성해 전체 장면을 3D로 재구성하는 프레임워크가 소개되었다. 인테리어 디자인 분야에서 클라이언트에게 가구 재배치 결과를 즉시 시각화해 보여줄 수 있다.

핵심 내용 기존에 3D 장면 재구성은 다시점 촬영이나 깊이 센서가 필요했지만, 이 프레임워크는 단일 이미지만으로 동작한다. 2D 사진에서 각 가구를 세그멘테이션한 뒤 개별 3D 메시로 변환하고, 가려진 면을 신경망 기반 인페인팅으로 채운다. 이후 사용자는 생성된 3D 공간에서 가구를 자유롭게 이동·회전시켜 다양한 배치를 실시간으로 확인할 수 있다.

기존 대비 차별점 단일 이미지 입력만으로 가구 분리→3D 복원→재배치까지 엔드투엔드로 처리한다는 점이 핵심이다. 기존 인테리어 시뮬레이션 도구들은 직접 3D 모델을 배치하거나 다수의 사진을 요구했지만, 이 접근법은 고객이 휴대폰으로 찍은 사진 한 장이면 충분하다.

활용 가능성 인테리어 디자인 상담 시 고객에게 재배치 결과를 즉석에서 보여주는 도구로 활용 가능하다. 가구 이커머스에서 "내 방에 배치해 보기" 기능이나, 부동산 가상 스테이징에도 적용할 수 있다. AR 앱과 결합하면 현장에서 실시간 인테리어 프리뷰도 가능할 것이다.

참고 자료 - 원본 트윗 ===