PyoSignal Logo
PyoSignal
Back to Research

Current World Models Lack a Persistent State Core

Paper ID: 2606.20545 β€’ 6 Upvotes
World Models Computer Vision AI Evaluation Physical Reasoning Vision Video Benchmark Evaluation
Current World Models Lack a Persistent State Core

πŸ“ 핡심 μš”μ•½

ν˜„μž¬μ˜ μ›”λ“œ λͺ¨λΈμ€ κ΄€μ°°λ˜μ§€ μ•ŠλŠ” μƒν™©μ—μ„œλ„ 물리적 μƒνƒœκ°€ μ§€μ†λ˜λŠ” 'λ‚΄λΆ€ μƒνƒœ μ½”μ–΄'κ°€ κ²°μ—¬λ˜μ–΄ μžˆμŒμ„ 증λͺ…함

πŸ“– 상세 λ‚΄μš©

AGI둜 ν–₯ν•˜λŠ” 핡심 기술인 μ›”λ“œ λͺ¨λΈμ€ 물리적 μ„Έκ³„μ˜ 지속적인 μƒνƒœ λ³€ν™”λ₯Ό λͺ¨λΈλ§ν•  수 μžˆμ–΄μ•Ό ν•©λ‹ˆλ‹€. κ·ΈλŸ¬λ‚˜ κΈ°μ‘΄ λ²€μΉ˜λ§ˆν¬λŠ” μ‹œκ°μ  μΆ©μ‹€λ„μ—λ§Œ 집쀑할 뿐, 관찰이 μ€‘λ‹¨λ˜μ—ˆμ„ λ•Œ 세계가 μ–΄λ–»κ²Œ μ§„ν™”ν•˜λŠ”μ§€λŠ” ν‰κ°€ν•˜μ§€ λͺ»ν•˜λŠ” ν•œκ³„κ°€ μžˆμŠ΅λ‹ˆλ‹€. 이λ₯Ό ν•΄κ²°ν•˜κΈ° μœ„ν•΄ 카메라 μ›€μ§μž„μ„ κ΄€μ°°μ„± λ³€ν™”λ‘œ μ •μ˜ν•˜κ³ , κ΄€μ°° 쀑단 ν›„ μž¬κ΄€μ°° μ‹œ μƒνƒœ 일관성을 μΈ‘μ •ν•˜λŠ” WRBenchλ₯Ό μ œμ•ˆν•©λ‹ˆλ‹€. 23개 λͺ¨λΈμ„ λŒ€μƒμœΌλ‘œ μ‹€ν—˜ν•œ κ²°κ³Ό, ν˜„μž¬μ˜ λͺ¨λΈλ“€μ€ κ΄€μ°°λ˜μ§€ μ•ŠλŠ” λ™μ•ˆ 사건이 μ§„ν–‰λ˜λŠ” 것이 μ•„λ‹ˆλΌ λ‹¨μˆœνžˆ 이전 μƒνƒœλ₯Ό μœ μ§€ν•˜λŠ” 'νŠΈλž˜ν‚Ή μƒ·' 방식에 머물러 있음이 λ°ν˜€μ‘ŒμŠ΅λ‹ˆλ‹€. μ΄λŸ¬ν•œ λ¬Έμ œλŠ” λͺ¨λΈ 규λͺ¨λ‚˜ μ œμ–΄ 방식과 λ¬΄κ΄€ν•˜κ²Œ λ‚˜νƒ€λ‚˜λ©°, μ΄λŠ” λ‹¨μˆœν•œ μŠ€μΌ€μΌμ—…λ§ŒμœΌλ‘œλŠ” 해결될 수 μ—†λŠ” 근본적인 섀계 κ²°ν•¨μž„μ„ μ‹œμ‚¬ν•©λ‹ˆλ‹€.

πŸ”‘ μ£Όμš” λ‚΄μš© (Key Points)

  • κ΄€μ°°λ˜μ§€ μ•ŠλŠ” μƒνƒœμ—μ„œλ„ 물리적 사건이 μ§€μ†λ˜λŠ” '지속적 μƒνƒœ μ½”μ–΄'의 λΆ€μž¬ 확인
  • 카메라 μ›€μ§μž„μ„ κ°œμž…(Intervention)으둜 κ°„μ£Όν•˜μ—¬ κ΄€μ°°μ„± λ³€ν™”λ₯Ό μΈ‘μ •ν•˜λŠ” WRBench λ„μž…
  • λͺ¨λΈ 규λͺ¨(Scale)λ‚˜ κΈ°ν•˜ν•™μ  사전 μ§€μ‹λ§ŒμœΌλ‘œλŠ” ν•΄κ²°λ˜μ§€ μ•ŠλŠ” 근본적 ν•œκ³„ 규λͺ…

πŸ’‘ 싀무적 κ°€μΉ˜ (Relevance)

λ‹¨μˆœνžˆ λ‹€μŒ ν”„λ ˆμž„μ„ 잘 μƒμ„±ν•˜λŠ” 것을 λ„˜μ–΄, μ—μ΄μ „νŠΈκ°€ 물리적 인과관계λ₯Ό μ΄ν•΄ν•˜κ³  μž₯기적인 κ³„νšμ„ μ„Έμš°κΈ° μœ„ν•œ 핡심 과제λ₯Ό μ œμ‹œν•¨

βœ… μΆ”μ²œ μ•‘μ…˜ (Actionable Items)

  • ν˜„μž¬ 개발 쀑인 λΉ„λ””μ˜€ 생성 λͺ¨λΈμ— WRBenchλ₯Ό μ μš©ν•˜μ—¬ μƒνƒœ 지속성 ν…ŒμŠ€νŠΈ
  • κ΄€μ°° 쀑단(Occlusion) μƒν™©μ—μ„œμ˜ 객체 μƒνƒœ λ³€ν™”(State transition) 좔적 μ‹€ν—˜
  • λ‹¨μˆœ ν”½μ…€ 일관성이 μ•„λ‹Œ 인과적 μƒνƒœ μœ μ§€ μ—¬λΆ€λ₯Ό 평가 μ§€ν‘œμ— 포함