4DCodeBench: 동적 장면의 역 그래픽스 에이전트 벤치마크
4DCodeBench: Benchmarking Agents on Inverse Graphics of Dynamic Scenes
- 매체
- Hugging Face
- 게시
- 중요도
- 3/5
- 화제 지수
- 11
한국어 요약
코드 생성을 통한 4D 역 그래픽스 벤치마크인 4DCodeBench가 소개됐다. 에이전트가 비디오에서 동적 장면을 재구성 가능한 그래픽스 프로그램으로 변환하는 능력을 평가하며, 변형, 유체 흐름, 파괴 등 다양한 물리 현상을 포함한 실제 및 합성 장면으로 구성됐다. 벤치마킹 결과 정적 재구성 능력이 복잡한 동역학 재구성으로 직결되지 않음을 보여준다.
원문 발췌 · English
We introduce 4DCodeBench, a benchmark for 4D inverse graphics through code generation, in which agents reconstruct dynamic scenes from video as executable graphics programs. To accomplish this, agents must translate visual observations into compact representations of scene structure and dynamics, by implementing abstractions such as physical simulations to reproduce complex behavior. To evaluate this capability, we curate a set of real-world videos and construct synthetic scenes spanning diverse physical phenomena, including deformation, fluid flow, and fracture. We perform extensive benchmarking of frontier models, finding that strong static reconstruction capabilities do not yet translate into reliable reconstruction of complex dynamics. 4DCodeBench provides a testbed for tracking progress toward agents that can interpret the dynamics of the world through code. Our benchmark is available at https://github.com/4DCodeBench/4DCodeBench