Claude 3.5 Sonnet
Anthropic · claude-3-5-sonnet-20241022 · United States of America · 上线 2024-06-20
—不在当前榜上
130Epoch ECI
1374网友盲测分(全球第 197)
7有成绩的基准
这个模型上线超过一年(或没有上线日期),所以没有名次;ECI 是 Epoch 给的。
相对薄弱
- OTIS Mock AIME 2024-2025:第 112 / 118 名(成绩 8.5%)
- GPQA diamond:第 109 / 117 名(成绩 55.3%)
各基准成绩
| 基准 | 成绩 | 名次 | 超过了多少模型 |
|---|---|---|---|
| Balrog | 32.6% | 12 / 17 | |
| WeirdML | 40.0% | 67 / 89 | |
| SimpleBench | 41.4% | 46 / 60 | |
| GSO-Bench | 4.6% | 22 / 25 | |
| DTBench | 67.8% | 96 / 109 | |
| GPQA diamond | 55.3% | 109 / 117 | |
| OTIS Mock AIME 2024-2025 | 8.5% | 112 / 118 |
成绩是该模型在最佳推理强度下的结果;名次只在已评分的模型里比。