ADV-034숲능력 측정형
SWE-bench
SWE-bench
학습 난이도
숲
AI가 실제 소프트웨어 문제를 해결할 수 있는지 평가하는 벤치마크.
한 문장으로 이해하기
SWE-bench는 실제 깃허브 이슈 같은 소프트웨어 문제를 AI가 직접 고칠 수 있는지 평가하는 벤치마크입니다.
이렇게 떠올리세요
실제 고장 난 기계를 주고 수리시켜 실력을 보는 시험과 같습니다.
실제 예시
코딩 에이전트의 성능을 SWE-bench 해결률로 비교합니다.
핵심 한 문장
SWE-bench는 실제 소프트웨어 문제 해결력을 재는 시험입니다.
위 문장을 보지 않고 자기 말로 다시 설명해보면 오래 기억에 남습니다.