벤치마크 · 코딩

DeepSWE v1.1 Long-horizon software engineering

실제 소프트웨어 저장소의 이슈를 분석하고 코드 패치로 해결하는 능력을 평가합니다. 저장소 탐색부터 구현·테스트까지 이어지는 엔지니어링 완성도를 봅니다.

측정 모델 5개 · 프로필 1개 · 데이터 기준 2026년 10월 21일

research/deepmind.google

원문 출처 ↗

같은 Hugging Face 리더보드 데이터셋·과제의 결과만 표시합니다. 높을수록 좋습니다.

출시일별 점수와 최고점 흐름

차트를 불러오는 중입니다…

상위 20

차트를 불러오는 중입니다…
출처
1GPT-5.6 TerraOpenAI · 상용 APIAPI69.6%1002026-07-09인용 ↗
2Gemini 3.7 FlashGoogle · 상용 APIAPI65.3%752026-08-13인용 ↗
3Muse Spark 1.2Meta · 상용 APIAPI54.9%502026-08-05인용 ↗
4Claude Sonnet 5Anthropic · 상용 APIAPI53.8%252026-06-30인용 ↗
5Gemini 3.6 FlashGoogle · 상용 APIAPI48.6%02026-07-21인용 ↗

마커: 원 = 오픈 웨이트, 사각 = 상용 API, 빈 마커 = 검증되지 않은 값. 점을 누르면 모델 상세로 이동합니다. 백분위는 이 프로필 안에서의 상대 위치입니다.