GPT-4o mini
OpenAI · gpt-4o-mini-2024-07-18 · United States of America · 上线 2024-07-18
—不在当前榜上
126Epoch ECI
1318网友盲测分(全球第 268)
12有成绩的基准
这个模型上线超过一年(或没有上线日期),所以没有名次;ECI 是 Epoch 给的。
相对薄弱
- SimpleBench:第 60 / 60 名(成绩 10.7%)
- FrontierMath-Tiers-1-3-v2-Private:第 84 / 84 名(成绩 0.7%)
各基准成绩
| 基准 | 成绩 | 名次 | 超过了多少模型 |
|---|---|---|---|
| Mystery Game Puzzles | 12.0% | 61 / 76 | |
| Balrog | 17.4% | 16 / 17 | |
| LMCA | 10.4% | 99 / 104 | |
| DTBench | 54.4% | 104 / 109 | |
| OTIS Mock AIME 2024-2025 | 6.9% | 113 / 118 | |
| WeirdML | 11.8% | 86 / 89 | |
| Chess Puzzles | 3.0% | 77 / 81 | |
| GPQA diamond | 37.7% | 115 / 117 | |
| SimpleQA Verified | 8.3% | 80 / 81 | |
| ARC-AGI-2 | 0.0% | 75 / 78 | |
| FrontierMath-Tiers-1-3-v2-Private | 0.7% | 84 / 84 | |
| SimpleBench | 10.7% | 60 / 60 |
成绩是该模型在最佳推理强度下的结果;名次只在已评分的模型里比。