CyberBench Patch v1.1
Vals AI / 编程 · 修补真实开源项目的安全漏洞。
在 裕瑞产业情报 中参与排名
证据预算NaN%
上游数据时间10/12 08:00
最近成功同步10/23 20:06
它测什么，怎么测
56 个 Patch 任务，统一 mini-swe-agent；编译、原漏洞复测及隐藏输入与维护者修复对照。
如何使用这份证据
计分：漏洞修补一类评测。固定 10 个对照型号至少测到 6 个，才参与计算。
评测成绩
同一模型测了多个档位时，按固定规则只取一套代表成绩；没有可用成绩的模型标为“未计入”并写明原因。匿名测试型号不展示，名次照搬原榜，每项最多列 30 个。
| 原榜名次 | 原榜型号 | 原始成绩 | 代表配置 |
|---|---|---|---|
| 1 | anthropic/claude-haiku-5-5Anthropic | 89.3% | Max 推理 |
| 1 | openai/gpt-6-solOpenAI | 89.3% | Max 推理 |
| 1 | openai/gpt-daybreak-blueOpenAI | 89.3% | Max 推理 |
| 1 | openai/gpt-5.6-solOpenAI | 89.3% | Max 推理 |
| 5 | anthropic/claude-opus-5-5-rangeAnthropic | 87.5% | Max 推理未计入：Cyber Range / CVP 为独立运行条件，不能代替标准型号的 Patch 成绩。 |
| 5 | zai/glm-5.3Z.ai | 87.5% | Max 推理 |
| 5 | openai/gpt-6-lunaOpenAI | 87.5% | Max 推理 |
| 5 | google/gemini-3.7-flashGoogle | 87.5% | High 推理 |
| 5 | openai/gpt-5.6-terraOpenAI | 87.5% | Max 推理 |
| 5 | google/gemini-3.8-flashGoogle | 87.5% | High 推理 |
| 5 | anthropic/claude-sonnet-5-5Anthropic | 87.5% | Max 推理 |
| 5 | anthropic/claude-fable-5-1Anthropic | 87.5% | Max 推理 |
| 5 | deepseek/deepseek-v4-flash-0731DeepSeek | 87.5% | High 推理 |
| 14 | fireworks/ember-1Fireworks AI | 85.7% | 来源默认配置 |
| 14 | anthropic/claude-opus-5-5Anthropic | 85.7% | Max 推理 |
| 14 | google/gemini-3.6-flashGoogle | 85.7% | High 推理 |
| 14 | xiaomi/mimo-v2.6-proXiaomi | 85.7% | 来源默认配置 |
| 14 | meta/muse_spark_1_2Meta | 85.7% | xHigh 推理 |
| 14 | tencent/hy4-previewTencent | 85.7% | 来源默认配置 |
| 14 | deepseek/deepseek-v4.1-flashDeepSeek | 85.7% | High 推理 |
| 14 | zai/glm-5.3-flashZ.ai | 85.7% | Max 推理 |
| 14 | xiaomi/mimo-v2.6-flashXiaomi | 85.7% | 来源默认配置 |
| 14 | anthropic/claude-opus-5Anthropic | 85.7% | Max 推理 |
| 14 | meta/muse-wonderMeta | 85.7% | Max 推理 |
| 14 | google/gemini-4-argonGoogle | 85.7% | High 推理 |
| 14 | deepseek/deepseek-v4-pro-0813DeepSeek | 85.7% | Max 推理 |
| 27 | grok/grok-4.7xAI | 83.9% | xHigh 推理 |
| 27 | meta/muse-wonder-fullMeta | 83.9% | Max 推理 |
| 27 | anthropic/claude-sonnet-5-rangeAnthropic | 83.9% | Max 推理未计入：Cyber Range 为独立运行条件，不能代替标准型号的 Patch 成绩。 |
| 27 | openai/gpt-5.6-lunaOpenAI | 83.9% | Max 推理 |
评测局限与数据署名
只取 Patch，不混入 PoC 或总分；回退比例按 Patch 的 56 题计算。 缺测留空；回退成绩计入并标注，受影响题目过半不计。
数据许可：官方公开结果；公开再展示保留官方署名，完整再分发授权仍以 Vals 条款为准
成绩由 Vals AI 发布。各项评测的原始分数尺度不同，不能直接相加；AIHOT 按公开规则把它们折算成同一种分数。