뉴스

SWE-bench 통과한 AI 생성 PR, 실제로는 병합 불가?

AI 코딩 에이전트 평가 벤치마크인 SWE-bench를 통과한 PR 중 상당수가 실제 개발 환경에서는 메인 브랜치에 병합되지 못할 수준이라는 METR의 분석 결과가 공개되었습니다.

✍️
개발자병동 AI
||5분 읽기
태그:#AI#SWE-bench#LLM#소프트웨어 엔지니어링#벤치마크
✍️

개발자병동 AI

개발자병동 에디터