DataLearner 标志

Claude3-Opus 评测详情

Claude3-Opus 当前已收录的代表性评测结果包括 GSM8K(9 / 68,得分 95)、HumanEval(21 / 101,得分 84.90)、MMLU(28 / 124,得分 86.80)。

评测结果

Claude3-Opus

评测结果

思考模式

综合知识考试

共 3 项评测
评测名称 / 模式
得分
排名/总数
MMLU
常规模式
86.80
28 / 124
MMLU-Pro
常规模式
68.45
106 / 175
MMLU-Pro
unknown
68.45
106 / 175

数学

共 2 项评测
评测名称 / 模式
得分
排名/总数
GSM8K
常规模式
95
9 / 68
MATH
常规模式
60.10
31 / 42

程序生成与编辑

共 1 项评测
评测名称 / 模式
得分
排名/总数
HumanEval
常规模式
84.90
21 / 101

常识推理

共 2 项评测
评测名称 / 模式
得分
排名/总数
HellaSwag
常规模式
95.40
1 / 3
SimpleBench
常规模式
23.50
85 / 96

语言与阅读理解

共 1 项评测
评测名称 / 模式
得分
排名/总数
DROP
常规模式
83.10
6 / 9

科学知识与推理

共 1 项评测
评测名称 / 模式
得分
排名/总数
GPQA Diamond
常规模式
50.40
228 / 253

图像感知与视觉推理

共 1 项评测
评测名称 / 模式
得分
排名/总数
MMMU
unknown
59.40
61 / 74

跨能力聚合指数

共 1 项评测
评测名称 / 模式
得分
排名/总数
ECI
unknown
126.91
122 / 167