살아있는 맥락 속의 세계를 보다: 통합된 실내외 도시 세계 생성

To See a World in a Living Context: Unified Indoor-Outdoor Urban World Generation

텍스트 기반 3차원 모델 생성이 대규모 야외 환경 및 상세한 실내 장면을 만드는 데 빠르게 발전해 왔지만, 이러한 영역은 일반적으로 독립적으로 합성되어 일관성 있는 도시 세계에 필요한 상호 연결성을 결여합니다. 본 논문에서는 지속적으로 업데이트되는 다중 규모의 세계 맥락을 기반으로 구축된 통합적인 실내외 도시 세계 생성 프레임워크인 HoloWorld를 제시합니다. HoloWorld는 사용자 설명으로부터 시작하여 도시 전체 계획부터 개별 건물에 이르기까지 다양한 세계 정보를 점진적으로 표현하고 업데이트하며, 생성된 실내가 관련 외부 건물과 명시적인 상호 연결성을 유지하도록 합니다. 진화하는 맥락 및 이전에 생성된 인접 블록을 기반으로 HoloWorld는 회귀적 방식으로 도시 외관을 생성하여 블록 간의 일관된 공간 구성 및 시각적 정체성을 확보합니다. 생성된 외부 표현은 3차원 건물 인스턴스와 평면도를 기반으로 더욱 구체화되며, 이를 통해 건물별 실내 생성이 가능하며, 기하학적으로 제약된 레이아웃과 상속된 외관 특징을 갖도록 합니다. 현재까지 알려진 바로는 HoloWorld가 일관성 있는 3차원 도시 세계 내에서 실내외 생성을 통합하는 최초의 프레임워크입니다. 광범위한 실험 결과, HoloWorld는 우수한 도시 외부 생성 성능을 달성하며, 평균 AQS 점수를 SOTA 대비 7.68% 향상시키고 가장 높은 평균 RDR 점수를 얻었으며, 동시에 통합된 3차원 도시 세계 내에서 건물 수준의 실내외 상호 연결성과 블록 간 연속성을 유지하는 것으로 나타났습니다.

Text-driven 3D generation has advanced rapidly in creating large-scale outdoor environments and detailed indoor scenes, but these domains are usually synthesized independently, lacking the correspondence required for a coherent urban world. We present HoloWorld, a unified indoor-outdoor urban world generation framework built on a continuously updated cross-scale world context. Initializing from a user description, HoloWorld progressively represents and updates the diverse world information, from city-scale planning to individual buildings, allowing generated interiors to maintain explicit correspondence with their associated exterior buildings. Conditioned on the evolving context and previously generated neighboring blocks, HoloWorld autoregressively generates urban exteriors with consistent spatial organization and visual identity across blocks. The generated exterior representations are further grounded in 3D building instances and footprints, enabling building-specific indoor generation with geometry-constrained layouts and inherited appearance characteristics. To our knowledge, HoloWorld is the first framework to unify indoor and outdoor generation within a coherent 3D urban world. Extensive experiments demonstrate that HoloWorld achieves superior urban exterior generation performance, improving the average AQS score over the SOTA by 7.68\% and obtaining the highest average RDR score, while maintaining strong building-level indoor-outdoor correspondence and cross-block continuity within a unified 3D urban world.