DataLearner 标志

Gemini 2.0 Pro ExperimentalvsGPT-4o(2024-11-20)

在 5 个共同 benchmark 中,Gemini 2.0 Pro Experimental 整体领先:Gemini 2.0 Pro Experimental 领先 5 项,GPT-4o(2024-11-20) 领先 0 项,持平 0 项,平均分差 +9.64。

Google DeepMind
Gemini 2.0 Pro Experimental

Google DeepMind · 2025-02-05 · 聊天大模型

OpenAI
GPT-4o(2024-11-20)

OpenAI · 2024-11-20 · 聊天大模型

Gemini 2.0 Pro Experimental5 项(100%)(0%)0 项GPT-4o(2024-11-20)

评测分数

按能力类目分组,每组内按分差大小排列;共 5 项。

综合知识考试

Gemini 2.0 Pro Experimental 领先 2/2
评测项Gemini 2.0 Pro ExperimentalGPT-4o(2024-11-20)分差
MMLU-Pro79.1067 / 175Normal (No Tools)77.9077 / 175Normal (No Tools)+1.20
MMLU86.5029 / 124Normal (No Tools)85.7039 / 124Normal (No Tools)+0.80

事实可靠性与幻觉

Gemini 2.0 Pro Experimental 领先 1/1
评测项Gemini 2.0 Pro ExperimentalGPT-4o(2024-11-20)分差
SimpleQA44.3016 / 46Normal (No Tools)38.8021 / 46Normal (No Tools)+5.50

数学

Gemini 2.0 Pro Experimental 领先 1/1
评测项Gemini 2.0 Pro ExperimentalGPT-4o(2024-11-20)分差
MATH91.804 / 42Normal (No Tools)68.5024 / 42Normal (No Tools)+23.30

自主开发与终端任务

Gemini 2.0 Pro Experimental 领先 1/1
评测项Gemini 2.0 Pro ExperimentalGPT-4o(2024-11-20)分差
Aider-Polyglot35.6040 / 59Normal (No Tools)18.2050 / 59Normal (No Tools)+17.40

规格对比

字段Gemini 2.0 Pro ExperimentalGPT-4o(2024-11-20)
发布机构Google DeepMindOpenAI
发布时间2025-02-052024-11-20
模型类型聊天大模型聊天大模型
架构稠密模型稠密模型
参数规模暂无数据暂无数据
上下文长度2000K128K
最大输出8K暂无数据

API 调用价格

价格优先使用 DataLearner 配置的 API 记录;缺失项不做推测。

价格项Gemini 2.0 Pro ExperimentalGPT-4o(2024-11-20)
文本输入暂无公开价格$2.5 / 1M tokens
文本输出暂无公开价格$10 / 1M tokens
缓存读取暂无公开价格$1.25 / 1M tokens

部分模型公开价格不完整,缺失字段按"暂无公开价格"展示。

小结

  • Gemini 2.0 Pro Experimental在以下类目领先:综合知识考试 (2/2)、事实可靠性与幻觉 (1/1)、数学 (1/1)、自主开发与终端任务 (1/1)

5 个共同 benchmark 上,Gemini 2.0 Pro Experimental 平均高出 9.64 分。

单项差距最大的 benchmark:MATH — Gemini 2.0 Pro Experimental 91.80,GPT-4o(2024-11-20) 68.50(分差 +23.30)。

本页正文由结构化模型、价格与 benchmark 数据生成,不使用实时 LLM 撰写。