구조 주석을 모으는 어려움
장면을 선이나 접합점, 평면 및 입체 구조로 표시하려면 수많은 요소를 주석해야 한다. 시점과 가림도 판단을 어렵게 하므로 사람의 수작업만으로 대규모 구조 정답을 만드는 데 부담이 있다.
설계에서 구조 추출
Structured3D는 전문적으로 제작한 실내 설계를 이용해 삼차원 구조를 자동 추출한다. 렌더링 전에 알려진 설계 정보를 활용해 구조와 영상 사이의 대응을 구성한다.
사실적인 합성 관측
렌더링 엔진으로 실내 영상을 생성하고 풍부한 구조 주석을 함께 제공한다. 합성 자료이므로 실제 센서의 잡음과 관측 누락을 포함하는 스캔 자료와는 생성 조건이 다르다.
실제 영상과의 결합
논문은 합성 자료와 실제 영상을 결합해 방 배치 추정망을 학습하고 벤치마크 성능을 비교했다. 구조 정보의 풍부함과 실제 환경으로의 전이 효과를 함께 살피는 활용이다.
관련 문서
RoomFormer / SceneVerse / ScanNet / ARKitScenes / 삼차원 재구성 / CAD