跳到正文

ProgramBench

Vals AI / 编程 · 只给可执行文件,从零重写出行为相同的程序。

官方评测
在 裕瑞产业情报 中参与排名
证据预算NaN%
上游数据时间10/12 08:00
最近成功同步10/23 20:06

它测什么,怎么测

取 Vals 专项页 Overall 通过率。同一型号按最高推理档位选代表配置,选择不看分数。

如何使用这份证据

计分:编程领域的程序重建一类。

评测成绩

同一模型测了多个档位时,按固定规则只取一套代表成绩;没有可用成绩的模型标为“未计入”并写明原因。匿名测试型号不展示,名次照搬原榜,每项最多列 30 个。

原榜名次原榜型号原始成绩代表配置
1anthropic/claude-opus-5-5Anthropic18.5%Max 推理
2anthropic/claude-fable-5-1Anthropic7.0%Max 推理
3anthropic/claude-sonnet-5-5Anthropic6.5%Max 推理
4openai/gpt-6-astraOpenAI5.5%Max 推理
5anthropic/claude-opus-5Anthropic3.0%Max 推理
5openai/gpt-6.1-solOpenAI3.0%Max 推理
7meta/muse_spark_1_3_maxMeta2.5%Max 推理
7anthropic/claude-haiku-5-5Anthropic2.5%Max 推理
7google/gemini-4-argonGoogle2.5%High 推理
10anthropic/claude-fable-5Anthropic2.0%Max 推理
10kimi/kimi-k3Moonshot AI2.0%来源默认配置
10openai/gpt-6-solOpenAI2.0%Max 推理
13openai/gpt-5.6-solOpenAI1.5%Max 推理
13zai/glm-5.3Z.ai1.5%Max 推理
15google/gemini-3.8-flashGoogle1.0%High 推理
15grok/grok-4.6xAI1.0%High 推理
15anthropic/claude-opus-4-8Anthropic1.0%Max 推理
18zai/glm-5.2Z.ai0.5%Max 推理
18xiaomi/mimo-v2.6-flashXiaomi0.5%来源默认配置
18deepseek/deepseek-v4.1-flashDeepSeek0.5%Max 推理
18thinkingmachines/inkling-smallThinking Machines Lab0.5%来源默认配置
18grok/grok-4.7xAI0.5%xHigh 推理
18openai/gpt-6-lunaOpenAI0.5%Max 推理
18openai/gpt-5.5OpenAI0.5%xHigh 推理
18meta/muse-wonder-fullMeta0.5%Max 推理
18meta/muse_spark_1_2Meta0.5%xHigh 推理
18anthropic/claude-sonnet-4-6Anthropic0.5%Max 推理
18openai/gpt-5.6-terraOpenAI0.5%Max 推理
18xiaomi/mimo-v2.6-proXiaomi0.5%来源默认配置
32poolside/laguna-xs.2poolside0.0%来源默认配置
评测局限与数据署名

Vals 公布每次运行有多少题被厂商接口转给了同厂商的旧型号:有回退的成绩照常计入并在模型页标注,受影响题目过半的不计。同属 Vals 的几项评测不能当作多家独立机构。

数据许可:官方公开结果;公开再展示保留官方署名,完整再分发授权仍以 Vals 条款为准

成绩由 Vals AI 发布。各项评测的原始分数尺度不同,不能直接相加;AIHOT 按公开规则把它们折算成同一种分数。