평가·벤치마크Carlos E. Jimenez, John Yang 외 (프린스턴 외)
SWE-bench 공개
SWE-bench 공개 — 실제 GitHub 이슈 2,294건. 발표 시점 최고 모델 해결률 1.96%
왜 중요한가
이후 코딩 에이전트 개발의 사실상 목표함수가 됨
출처 — 1차 출처만 싣고, 직접 이동해 확인할 수 있어요
논문arxiv.orghttps://arxiv.org/abs/2310.067702026년 8월 24일에 더한 조각 · 그 주 보기