세계 모델에 지속적인 상태 핵심이 부족하다

한줄 요약

현존하는 세계 모델은 관찰되지 않을 때도 세계 상태가 지속적으로 진화해야 한다는 핵심 요구를 충족하지 못하며, 이를 진단하는 새로운 벤치마크 WRBench를 제안한다.

풀어야 하는 문제

세계 모델은 물리적 세계를 모델링하기 위해 관찰과 무관하게 지속적으로 진화하는 내부 상태를 가져야 한다. 그러나 기존 벤치마크는 충실도, 움직임, 카메라 제어성 같은 표면적 속성만 평가하며, 관찰이 중단된 후 세계가 계속 진화하는지 묻지 않는다.

접근 방법

WRBench는 카메라 움직임을 관찰 가능성에 대한 개입으로 간주하고, 세 가지 질문을 통해 평가한다: (1) 카메라가 요청된 상호작용을 수행하는가, (2) 장면이 연속적이고 식별 가능한가, (3) 돌아온 대상이 시작된 사건과 일관된 상태인가. 23개 모델, 4가지 제어 패러다임, 9600개 비디오로 실험했다.

결과·기여

모든 모델이 관찰 중단 시 사건 진행을 멈추고, 재개 시 중단된 상태를 그대로 유지하는 '추적 샷' 방식의 한계를 보였다. 이는 제어 패러다임, 모델 계열, 규모에 관계없이 일관되게 나타나며, 세계 상태 진화의 안정성과 일관성을 세계 모델 설계의 일차적 목표로 삼아야 함을 시사한다.