跳到正文

AA-Omniscience v1.1(Artificial Analysis)

Artificial Analysis / 知识问答 · 事实问答,答错倒扣、拒答不扣,看模型知道什么、会不会乱编。

官方评测
在 AICue 中参与排名
所属领域知识问答
上游数据时间待核实
最近成功同步10/30 02:05

它测什么,怎么测

取 Artificial Analysis 独立公布的 AA-Omniscience v1.1 分数(−100 到 100),3,000 道事实题。同一型号按最高推理档位选代表配置,选择不看分数。

AICue 怎么用它

计分:知识问答领域,与 SimpleQA Verified 同属事实准确一类,两项合起来算一票。固定 10 个对照型号至少测到 6 个,才参与计算。

评测成绩

同一模型测了多个档位时,按固定规则只取一套代表成绩;没有可用成绩的模型标为“未计入”并写明原因。匿名测试型号不展示,名次照搬原榜,每项最多列 30 个。

原榜名次原榜型号原始成绩代表配置
1gemini-4-carbonGoogle53.5High 推理
2claude-opus-5-5Anthropic48.1Max 推理 · 含来源回退
3claude-fable-5-1Anthropic46.3Max 推理 · 含来源回退
4gemini-4-argonGoogle46.1High 推理
9gpt-6-astraOpenAI42.4Max 推理
12gpt-6-1-solOpenAI42Max 推理
23grok-4-7xAI31.2xHigh 推理
24muse-wonder-fullMeta30.6Max 推理
25claude-sonnet-5-5Anthropic30.5Max 推理 · 含来源回退
27kimi-k3-1-proMoonshot AI29.9来源默认配置
28gpt-6-1-terraOpenAI29.6Max 推理
33muse-spark-openMeta25.8xHigh 推理
34muse-wonderMeta25.1Max 推理
37gemini-3-8-flashGoogle23.3High 推理
39muse-spark-1-3Meta22.4Max 推理
44step-5StepFun16.4来源默认配置
46claude-haiku-5-5Anthropic12.3Max 推理
47qwen3-8-maxAlibaba10.5来源默认配置
49qwen3-8-2-4t-a95bAlibaba7.8来源默认配置
50gemini-3-5-flash-liteGoogle6.9来源默认配置
51glm-5-3Z.ai6Max 推理
53mistral-large-4Mistral AI5.1High 推理
55nvidia-nemotron-3-ultra-550b-a55bNVIDIA3.4来源默认配置
56mistral-large-4-mediumMistral AI3.3Medium 推理
57reflection-beamReflection2.3来源默认配置
59deepseek-v4-1-flash-1017DeepSeek0.9Max 推理
60glm-5-3-flashZ.ai0.7来源默认配置
61ling-3-1-flash-1019InclusionAI-0.1来源默认配置
62inklingThinking Machines Lab-1.5xHigh 推理
63kimi-k3-lowMoonshot AI-1.7Low 推理
评测局限与数据署名

分数同时反映知识量和是否乱编,不单纯是知识量。v1.1 换了题集,和 v1 的分数不能直接比,v1 的成绩不再计入。 缺测留空。

数据许可:Artificial Analysis 公开页面数据;展示须显著署名并链接来源,遵守其 Terms of Use

成绩由 Artificial Analysis 发布。各项评测的原始分数尺度不同,不能直接相加;AICue 按公开规则把它们折算成同一种分数。