swe-bench
페이지 3개
표기 변형을 한 태그로 묶었습니다 — swe-bench · SWE-bench
PAPER·2026
Agent Lightning v1.0
배포용 harness가 agent loop를 쥔 채 RL을 수행할 때 생기는 retokenization, advantage, loss 정규화, 스케줄링 문제를 정리한 프레임워크 논문
↳ 9 agentic-rlharness
PAPER·2026
How Do AI Agents Spend Your Money?
SWE-bench Verified 500문제를 8개 모델로 4회씩 실행한 trajectory 분석. 비용은 input 토큰에서 나오고 토큰을 더 써도 정확도는 오르지 않는다
↳ 12 agentic-codingtoken-consumption
PAPER·2026
Harness Updating Is Not Harness Benefit
harness 자기진화를 evolver의 갱신 능력과 agent의 수혜 능력으로 분해해 LLM 7종과 벤치마크 3종으로 측정한다
↳ 25 harness-evolutionself-evolving-agents