Holo-World: Unified Camera, Object and Weather Control for Video World Model

기존 비디오 월드 모델은 카메라 및 객체 제어와 환경(날씨) 변화가 분리되어 있으며, 날씨 생성 시 미래 구조에 의존하는 한계가 있었습니다. 본 논문은 단일 프레임에서 시작하여 카메라, 객체, 날씨를 동시에 제어하는 'source-to-state' 설정을 제안합니다. 이를 위해 다양한 비디오를 통합 제어 샘플로 변환한 HoloStateData 데이터셋을 구축했습니다. 모델 구조로는 구조 유지와 날씨 전이를 분리하는 Unified Scene Adapter와 잔차를 개별 제어하는 Scene-Weather Decomposed CFG를 도입했습니다. 실험 결과, Holo-World는 장면 구조의 일관성을 유지하면서도 정밀한 제어와 자연스러운 날씨 변화를 동시에 달성했습니다.