DataLearner 标志

GPT-4o mini 评测详情

GPT-4o mini 当前已收录的代表性评测结果包括 MBPP(4 / 69,得分 87.20)、HumanEval(19 / 101,得分 87.20)、GSM8K(15 / 68,得分 91.30)。

评测结果

GPT-4o mini

评测结果

思考模式
工具使用

综合知识考试

共 3 项评测
评测名称 / 模式
得分
排名/总数
MMLU
常规模式
82
48 / 124
MMLU-Pro
常规模式
61.70
120 / 175
MMLU-Pro
unknown
63.09
117 / 175

数学

共 2 项评测
评测名称 / 模式
得分
排名/总数
GSM8K
常规模式
91.30
15 / 68
MATH
常规模式
70.20
19 / 42

程序生成与编辑

共 2 项评测
评测名称 / 模式
得分
排名/总数
HumanEval
常规模式
87.20
19 / 101
MBPP
常规模式
87.20
4 / 69

科学知识与推理

共 2 项评测
评测名称 / 模式
得分
排名/总数
GPQA Diamond
常规模式
41.10
240 / 253
GPQA
常规模式
40.20
14 / 17

事实可靠性与幻觉

共 1 项评测
评测名称 / 模式
得分
排名/总数
SimpleQA
常规模式
9.50
43 / 46

写作与创意表达

共 1 项评测
评测名称 / 模式
得分
排名/总数
Creative Writing
常规模式
872.80
96 / 110

图像感知与视觉推理

共 5 项评测
评测名称 / 模式
得分
排名/总数
GeoBench ACW
常规模式
64
15 / 20
MMMU
unknown
59.40
61 / 74
MMMU-Pro
常规模式
41.50
221 / 229
MMMU-Pro
unknown
37.60
225 / 229
VPCT
常规模式
34
23 / 24

常识推理

共 1 项评测
评测名称 / 模式
得分
排名/总数
SimpleBench
常规模式
10.70
96 / 96

自主开发与终端任务

共 1 项评测
评测名称 / 模式
得分
排名/总数
Aider-Polyglot
常规模式
3.60
59 / 59

跨应用与工具编排

共 1 项评测
评测名称 / 模式
得分
排名/总数
Pinch Bench
开启思考工具
75
28 / 38

客服与业务流程

共 1 项评测
评测名称 / 模式
得分
排名/总数
τ³-Banking
常规模式工具
2.90
166 / 167

机器学习工程

共 1 项评测
评测名称 / 模式
得分
排名/总数
WeirdML v2
常规模式工具
11.76
51 / 52

逻辑与规划

共 1 项评测
评测名称 / 模式
得分
排名/总数
BALROG
常规模式工具
17.40
12 / 12

跨能力聚合指数

共 1 项评测
评测名称 / 模式
得分
排名/总数
ECI
unknown
126.56
123 / 167