Artificial Analysis：Gemini Decision 1 在 Decision Index 上得分 66，落后领先模型 7 分

Artificial Analysis 表示，Google 的 Gemini Decision 1 在 Decision Index v2.1 上得分 66，与 Elephant 9B 和 Jev 1.14 相当，落后 Drex Max v1.1 和 GLiDE v1.2 7 分；后两者均得分 73。该机构称，这款模型在该指数上尚未达到前沿水平。

• 优势：它在知识和推理方面领先于其他决策模型，在 AA-Omniscience-Decision 上得分 66，在 HLE-MultiChoice 上得分 49。它在该指数上的 Brier 分数（一项校准度指标，越低越好）为 0.18。
• 劣势：在 AA-Paperclip（该机构新推出的分类与信息提取基准测试）中，它能对全部 15 道题都答对的文档占比为 33%，而 Drex Max v1.1 为 63%。
• 成本与速度：输入 token 每 100 万个收费 0.10 美元，每 100 万项任务的成本为 345 美元，约为 Drex Max v1.1（103 美元）的三倍，接近处于 Decisions 模式的 GPT-6 Luna（339 美元）。每项任务耗时 211 毫秒，比 Drex Max v1.1（283 毫秒）快，比 Celeris-1.1 Decision（61 毫秒）慢。

以上数据来自 Artificial Analysis 自行测量。