FrontierCode
2026-10-27 · 通用可合并性
2.0
- 测什么
- 通用可合并性：维护者会不会合并这份 PR。2.0 为 132 题套件。任务由维护者编写，用单元测试、评分细则与验证器打分。不公平的联网使用会被清零。在本站作为 general 榜，同时出现在 Web 前端、Android 与 CLI / DevOps 场景。
- 怎么测
- Cognition 的 FrontierCode 2.0（当前修订）。公开页默认 Main 集；本站按「All reasoning levels」收录全部（模型 × 推理档）行，不截断。名次 # 按该模型在 Main 上最高分推理档排序。完整 JSON 含 Obsidian 3（公开 HTML 表省略该行）；本站按完整 JSON 收录。Score 是 rubric 加权聚合；Pass rate、Flag rate、Cost / rollout、Output tokens 与来源列一致。
- 分数含义
- 百分比是可合并性 Score（越高越好）。不公平联网被标记的 run 记 0。综合分按通过率口径：相对榜首比值归一化。
- 注意
- Main 与 Extended 是两套任务集；本站只收录默认 Main。公开 HTML 榜省略 Obsidian 3，完整 data.json 以 Obsidian 3 high ~46.8% 居首，其次 Claude Opus 5.5 max ~45.5%。SWE-* / Beam / Obsidian / Inkling / Mistral 等没有站内模型页时只保留来源名。1.1 仍完整保留为历史版本。
- 更新
- 修订 2.0 为当前版本（changelog 2026-10-27）。本页于 2026-10-28 从 https://cognition.com/data/frontier-code-2.0/data.json 同步 102 行（26 个模型的全部推理档）。旧 frontiercode-leaderboard/data.json 仍只有 v1/v1_1，不作当前源。
完整榜单
102
| # | 模型 | 分数 | 通过率 % | 标记率 | 单次成本 | 输出 tokens |
|---|
| 1 | ?Obsidian 3low | 39.2% | 43.1% | 1.5% | $2.20 | — |
| 1 | ?Obsidian 3medium | 39.8% | 43.7% | 1.5% | $2.84 | — |
| 1 | ?Obsidian 3high | 46.8% | 51.4% | 1.7% | $8.62 | — |
| 1 | ?Obsidian 3xhigh | 45.9% | 50.4% | 2.1% | $19.59 | — |
| 1 | ?Obsidian 3max | 45.5% | 49.9% | 4.5% | $47.44 | — |
| 2 | Claude Opus 5.5low | 14.7% | 16.4% | 1.2% | $0.746 | 14.2k |
| 2 | Claude Opus 5.5medium | 30.1% | 33.0% | 1.5% | $1.70 | 30.1k |
| 2 | Claude Opus 5.5high | 34.5% | 37.9% | 1.5% | $2.42 | 41.2k |
| 2 | Claude Opus 5.5xhigh | 43.4% | 47.3% | 2.1% | $5.18 | 88.1k |
| 2 | Claude Opus 5.5max | 45.5% | 49.7% | 2.9% | $12.82 | 201.9k |
| 3 | GPT-6 Astralow | 31.1% | 34.2% | 0.8% | $2.44 | 9.0k |
| 3 | GPT-6 Astramedium | 36.8% | 40.2% | 1.7% | $3.49 | 14.1k |
| 3 | GPT-6 Astrahigh | 38.3% | 41.4% | 2.4% | $4.28 | 18.4k |
| 3 | GPT-6 Astraxhigh | 41.4% | 44.9% | 1.5% | $4.54 | 20.9k |
| 3 | GPT-6 Astramax | 42.8% | 46.2% | 2.3% | $6.68 | 36.4k |
| 4 | Claude Sonnet 5.5low | 9.4% | 10.6% | 1.1% | $0.369 | 11.3k |
| 4 | Claude Sonnet 5.5medium | 14.2% | 15.8% | 1.4% | $0.482 | 14.4k |
| 4 | Claude Sonnet 5.5high | 21.9% | 24.3% | 1.4% | $1.07 | 27.8k |
| 4 | Claude Sonnet 5.5xhigh | 34.8% | 38.0% | 2.3% | $3.31 | 80.4k |
| 4 | Claude Sonnet 5.5max | 41.0% | 45.0% | 3.8% | $19.94 | 514.7k |