AI AI 해설
2026년 10월 9일 생성에이전트·터미널 작업이 강점인 상용 API 모델
종합 평가
종합 레이팅 1527(3위), 가중 비교 14.5다. 레이팅은 같은 벤치 비교로 만든 상대 지표다. 분야별로 에이전트 1223(3위), 추론·지식 1274(4위), 코딩 1222(7위)다.
벤치 강점
LLM Stats 집계에서 Terminal-Bench 4.0 70.6%(1/21), HealthBench Professional 69.2%(1/14), HealthBench 65.4%(1/10)를 기록했다. BenchCAD는 74.7%(1/7), Python 도구 사용 시 96.3%(1/7)다.
개발·업무 성능
SWE-bench Pro 81.3%(2/55), SWE-bench Multilingual 90.3%(2/35), FrontierCode 1.1 52.1%(5/22)다. OfficeQA Pro는 65.6%(6/12), Legal Agent Benchmark는 11.7%(3/14)다. 모든 벤치 점수는 미검증 집계다.
도입 조건
상용 API로 제공되며 컨텍스트 1M, 최대 출력 128K다. 1M 토큰당 가격은 입력 $2.00, 출력 $10.0이다. 멀티모달 레이팅은 1036, 과학·보안은 1151이며, 레이팅 외 세부 비용·지연 자료는 자료 없음이다.
수집된 벤치·가격·출시 숫자만 입력으로 받아 LLM이 작성했고, 입력에 없는 숫자가 나오면 폐기합니다. 사용 결정은 원문 출처와 직접 평가로 확인하세요.
분야별 레이팅
비슷한 모델과 비교 →| 분야 | 레이팅 | 분야 순위 | 벤치 수 |
|---|---|---|---|
| 코딩 | 8 | 7 | |
| 에이전트 | 2 | 8 | |
| 추론·지식 | 4 | 16 | |
| 멀티모달 | — | 1 | |
| 과학·보안 | 4 | 5 |
분야 레이팅은 그 분야 벤치에서의 비교만으로 계산합니다. 회색 선은 종합 1위 모델입니다.
벤치마크 점수
57개 · 프로필별 순위코딩
| 벤치 | 프로필 | 점수 | 순위 | 백분위 | 출처 |
|---|---|---|---|---|---|
| SciCode | Artificial Analysis | 61.0% | 4 / 84 | 97 | 확인됨 ↗ |
| SWE-bench Pro | LLM Stats 집계 | 81.3% | 2 / 55 | 98 | 자기보고 ↗ |
| DeepSWE 1.1 | LLM Stats 집계 | 71% | 9 / 39 | 79 | 자기보고 ↗ |
| SWE-bench Multilingual | LLM Stats 집계 | 90.3% | 2 / 35 | 97 | 자기보고 ↗ |
| FrontierCode 1.1 | LLM Stats 집계 | 52.1% | 5 / 22 | 81 | 자기보고 ↗ |
| Terminal-Bench 4.0 | LLM Stats 집계 | 70.6% | 1 / 21 | 100 | 자기보고 ↗ |
| FrontierSWE V2 | LLM Stats 집계 | 61.9% | 2 / 3 | 50 | 자기보고 ↗ |
| FrontierCode 1.1 (Extended) | LLM Stats 집계 | 64.4% | 1 / 2 | 100 | 자기보고 ↗ |
에이전트
| 벤치 | 프로필 | 점수 | 순위 | 백분위 | 출처 |
|---|---|---|---|---|---|
| GDPval-AA | Artificial Analysis | 67.0% | 2 / 104 | 99 | 확인됨 ↗ |
| AutomationBench | LLM Stats 집계 | 44.7% | 8 / 24 | 70 | 자기보고 ↗ |
| Legal Agent Benchmark | LLM Stats 집계 | 11.7% | 3 / 14 | 88 | 자기보고 ↗ |
| BenchCAD | LLM Stats 집계 | 74.7% | 1 / 7 | 100 | 자기보고 ↗ |
| BenchCAD (with Python tool) | LLM Stats 집계 | 96.3% | 1 / 7 | 100 | 자기보고 ↗ |
| GDPval-AA 2.1 | LLM Stats 집계 | 1,844 | 2 / 6 | 80 | 자기보고 ↗ |
| AA-Briefcase v1.1 | LLM Stats 집계 | 1,811 | 2 / 4 | 67 | 자기보고 ↗ |
| Toolathlon-Verified | LLM Stats 집계 | 77.8% | 2 / 4 | 83 | 자기보고 ↗ |
| OSWorld 2.1 (partial) | LLM Stats 집계 | 80.1% | 1 / 2 | 100 | 자기보고 ↗ |
| OSWorld 2.1 (strict) | LLM Stats 집계 | 43.5% | 1 / 2 | 100 | 자기보고 ↗ |
추론·지식
| 벤치 | 프로필 | 점수 | 순위 | 백분위 | 출처 |
|---|---|---|---|---|---|
| Humanity's Last Exam | Artificial Analysis | 55.0% | 4 / 141 | 98 | 확인됨 ↗ |
| Intelligence Index | Artificial Analysis | 56.0 | 2 / 141 | 99 | 확인됨 ↗ |
| AA-LCR | Artificial Analysis | 82.7% | 20 / 139 | 86 | 확인됨 ↗ |
| CritPT | Artificial Analysis | 31.4% | 5 / 139 | 97 | 확인됨 ↗ |
| Program Bench | LLM Stats 집계 | 79.7% | 3 / 13 | 83 | 자기보고 ↗ |
| OfficeQA Pro | LLM Stats 집계 | 65.6% | 6 / 12 | 55 | 자기보고 ↗ |
| Humanity's Last Exam (no tools, text-only) | LLM Stats 집계 | 56.9% | 2 / 11 | 90 | 자기보고 ↗ |
| BioMysteryBench | LLM Stats 집계 | 89.2% | 3 / 7 | 67 | 자기보고 ↗ |
| ArXivMath | LLM Stats 집계 | 86.8% | 2 / 5 | 75 | 자기보고 ↗ |
| Chartography | LLM Stats 집계 | 90.2% | 1 / 5 | 100 | 자기보고 ↗ |
| Global-MMLU | LLM Stats 집계 | 92.1% | 2 / 3 | 50 | 자기보고 ↗ |
| Humanity's Last Exam (with tools) | LLM Stats 집계 | 64.5% | 1 / 3 | 100 | 자기보고 ↗ |
| LatchBio SingleCellBench | LLM Stats 집계 | 59.1% | 2 / 3 | 50 | 자기보고 ↗ |
| LatchBio SpatialBench Verified | LLM Stats 집계 | 72.5% | 1 / 3 | 100 | 자기보고 ↗ |
| MILU | LLM Stats 집계 | 91.6% | 2 / 3 | 50 | 자기보고 ↗ |
| OfficeQA | LLM Stats 집계 | 76.9% | 2 / 3 | 50 | 자기보고 ↗ |
| Chartography (no tools) | LLM Stats 집계 | 61.6% | 1 / 2 | 100 | 자기보고 ↗ |
| CursorBench 4.0 | LLM Stats 집계 | 55.5% | 2 / 2 | 0 | 자기보고 ↗ |
| Medicinal Chemistry (ADME) | LLM Stats 집계 | 65.3% | 1 / 2 | 100 | 자기보고 ↗ |
| Morphology-to-molecule matching | LLM Stats 집계 | 25% | 2 / 2 | 0 | 자기보고 ↗ |
| PhysicianBench | LLM Stats 집계 | 63.2% | 1 / 2 | 100 | 자기보고 ↗ |
| Protein Design — Library Ranking | LLM Stats 집계 | 54.8% | 1 / 2 | 100 | 자기보고 ↗ |
| Protocols Troubleshooting | LLM Stats 집계 | 67.3% | 1 / 2 | 100 | 자기보고 ↗ |
| Protocols Understanding (V2) | LLM Stats 집계 | 66.6% | 1 / 2 | 100 | 자기보고 ↗ |
| ArXivMath (with tools) | LLM Stats 집계 | 95.2% | 1 / 1 | 50 | 자기보고 ↗ |
| BioMysteryBench (Human Difficult) | LLM Stats 집계 | 44.7% | 1 / 1 | 50 | 자기보고 ↗ |
| De novo protein binder design | LLM Stats 집계 | 82.3% | 1 / 1 | 50 | 자기보고 ↗ |
멀티모달
| 벤치 | 프로필 | 점수 | 순위 | 백분위 | 출처 |
|---|---|---|---|---|---|
| SWE-Bench Multimodal | LLM Stats 집계 | 54.3% | 3 / 7 | 67 | 자기보고 ↗ |
| Biomedical image analysis | LLM Stats 집계 | 72.2% | 1 / 2 | 100 | 자기보고 ↗ |
과학·보안
| 벤치 | 프로필 | 점수 | 순위 | 백분위 | 출처 |
|---|---|---|---|---|---|
| AA-Omniscience Accuracy | Artificial Analysis | 54.0% | 13 / 139 | 91 | 확인됨 ↗ |
| AA-Omniscience Index | Artificial Analysis | 32.3 | 7 / 139 | 96 | 확인됨 ↗ |
| HealthBench Professional | LLM Stats 집계 | 69.2% | 1 / 14 | 100 | 자기보고 ↗ |
| HealthBench | LLM Stats 집계 | 65.4% | 1 / 10 | 100 | 자기보고 ↗ |
| Terminal-Bench-Science 0.1 | LLM Stats 집계 | 59.9% | 2 / 5 | 75 | 자기보고 ↗ |
| HealthBench Professional (raw) | LLM Stats 집계 | 77.1% | 1 / 2 | 100 | 자기보고 ↗ |
| Protein Design — Sequence Generation | LLM Stats 집계 | 51% | 1 / 2 | 100 | 자기보고 ↗ |
| HealthBench (raw) | LLM Stats 집계 | 69.4% | 1 / 1 | 50 | 자기보고 ↗ |
속도·비용
| 벤치 | 프로필 | 점수 | 순위 | 백분위 | 출처 |
|---|---|---|---|---|---|
| Artificial Analysis Output Speed | Artificial Analysis | 141 tok/s | 27 / 108 | 76 | 확인됨 ↗ |
| Artificial Analysis Time to First Chunk | Artificial Analysis | 485.42초 | 107 / 108 | 1 | 확인됨 ↗ |
순위는 같은 프로필(같은 문항·하네스·출처)에서 측정된 모델 중 위치입니다. * 는 자기보고·인용 등 검증되지 않은 값입니다.
레이팅이 비슷한 모델
- Claude Opus 5.5 1위 · 1766 비교
- GPT-6 Astra 2위 · 1681 비교
- Claude Fable 5.1 4위 · 1637 비교
- GPT-5.6 Sol 5위 · 1590 비교
- Claude Opus 5 6위 · 1550 비교
Anthropic의 다른 모델
공급사 →- Claude Haiku 5.5 2026-10-07 · 1356
- Claude Opus 5.5 2026-09-22 · 1766
- Claude Fable 5.1 2026-09-01 · 1637
- Claude Opus 5 2026-07-24 · 1550
- Claude Sonnet 5 2026-06-30 · 1283
- Claude Fable 5 2026-06-12 · 1522
- Claude Mythos 5 2026-06-12 · 1393
- Claude Mythos Preview 2026-05-28 · 1435