跳到正文

Terminal-Bench Science · AA

Artificial Analysis / 科研 · 在终端完成科学工作流与分析。

官方评测
在 AICue 中参与排名
所属领域科研
上游数据时间待核实
最近成功同步10/30 02:05

它测什么,怎么测

70 个 Harbour 科学终端任务,统一 mini-swe-agent,每题三次运行的平均 pass@1。

AICue 怎么用它

计分:科学工作流;与 Vals 复跑的同一题库共用一类评测。固定 10 个对照型号至少测到 6 个,才参与计算。

评测成绩

同一模型测了多个档位时,按固定规则只取一套代表成绩;没有可用成绩的模型标为“未计入”并写明原因。匿名测试型号不展示,名次照搬原榜,每项最多列 30 个。

原榜名次原榜型号原始成绩代表配置
1gemini-4-carbonGoogle64.8%High 推理
2gpt-6-astraOpenAI63.3%Max 推理
5claude-opus-5-5Anthropic59.0%Max 推理 · 含来源回退
6gpt-6-1-solOpenAI58.1%Max 推理
7gpt-6-1-terraOpenAI57.6%Max 推理
9claude-sonnet-5-5Anthropic53.3%Max 推理 · 含来源回退
11gemini-4-argonGoogle52.9%High 推理
16claude-fable-5-1Anthropic43.3%Max 推理 · 含来源回退
21muse-wonder-fullMeta37.1%Max 推理
24kimi-k3-1-proMoonshot AI34.3%来源默认配置
27gpt-6-solOpenAI30.0%Max 推理
29claude-opus-5Anthropic28.6%Max 推理
30muse-wonderMeta25.7%Max 推理
34gpt-5-6-solOpenAI22.4%Max 推理
36claude-haiku-5-5Anthropic20.0%Max 推理
41gpt-5-6-terraOpenAI13.8%Max 推理
42deepseek-v4-1-flash-1017DeepSeek12.9%Max 推理
43qwen3-8-maxAlibaba11.9%来源默认配置
44muse-spark-1-3Meta11.0%Max 推理
48gemini-3-8-flashGoogle10.0%High 推理
50glm-5-3Z.ai9.5%Max 推理
52deepseek-v4-1-flashDeepSeek9.0%Max 推理
53gpt-6-lunaOpenAI8.6%Max 推理
55kimi-k3Moonshot AI8.1%Max 推理
59grok-4-6xAI6.2%High 推理
60mimo-v2-6-proXiaomi5.7%来源默认配置
60deepseek-v4-proDeepSeek5.7%Max 推理
64grok-4-7xAI4.8%xHigh 推理
64glm-5-3-flashZ.ai4.8%来源默认配置
68mistral-large-4Mistral AI4.3%High 推理
评测局限与数据署名

取 terminalBenchScience 总体成绩,不混用领域切片。 缺测留空;回退成绩计入并标注,受影响题目过半不计。

数据许可:Artificial Analysis 公开页面数据;展示须显著署名并链接来源,遵守其 Terms of Use

成绩由 Artificial Analysis 发布。各项评测的原始分数尺度不同,不能直接相加;AICue 按公开规则把它们折算成同一种分数。