DataLearner 标志

Claude 3.5 Sonnet 评测详情

Claude 3.5 Sonnet 当前已收录的代表性评测结果包括 HumanEval(5 / 101,得分 92)、MMLU(19 / 124,得分 88.30)、MATH(18 / 42,得分 71.10)。

评测结果

Claude 3.5 Sonnet

评测结果

思考模式

综合知识考试

共 4 项评测
评测名称 / 模式
得分
排名/总数
MMLU
常规模式
88.30
19 / 124
MMLU-Pro
常规模式
77.64
79 / 175
MMLU-Pro
unknown
77.64
79 / 175
HLE
unknown
4.08
232 / 235

程序生成与编辑

共 1 项评测
评测名称 / 模式
得分
排名/总数
HumanEval
常规模式
92
5 / 101

数学

共 3 项评测
评测名称 / 模式
得分
排名/总数
MATH
常规模式
71.10
18 / 42
FrontierMath
常规模式
1
52 / 60
0
72 / 80

科学知识与推理

共 1 项评测
评测名称 / 模式
得分
排名/总数
GPQA Diamond
常规模式
59.40
213 / 253

图像感知与视觉推理

共 2 项评测
评测名称 / 模式
得分
排名/总数
MMMU
unknown
68.30
49 / 74
MMMU-Pro
unknown
51.50
198 / 229

常识推理

共 1 项评测
评测名称 / 模式
得分
排名/总数
SimpleBench
常规模式
27.50
80 / 96

跨能力聚合指数

共 1 项评测
评测名称 / 模式
得分
排名/总数
ECI
unknown
130
115 / 167