DataLearner 标志

Gemma2-27B 评测详情

Gemma2-27B 当前已收录的代表性评测结果包括 MBPP(24 / 69,得分 62.60)、GSM8K(29 / 68,得分 74)、HumanEval(49 / 101,得分 51.80)。

评测结果

Gemma2-27B

评测结果

思考模式

综合知识考试

共 2 项评测
评测名称 / 模式
得分
排名/总数
MMLU
常规模式
75.20
66 / 124
MMLU-Pro
常规模式
56.54
128 / 175

数学

共 2 项评测
评测名称 / 模式
得分
排名/总数
GSM8K
常规模式
74
29 / 68
MATH
常规模式
42.30
38 / 42

程序生成与编辑

共 2 项评测
评测名称 / 模式
得分
排名/总数
MBPP
常规模式
62.60
24 / 69
HumanEval
常规模式
51.80
49 / 101

常识推理

共 1 项评测
评测名称 / 模式
得分
排名/总数
HellaSwag
常规模式
86.40
2 / 3

语言与阅读理解

共 1 项评测
评测名称 / 模式
得分
排名/总数
DROP
常规模式
74.20
9 / 9

综合推理

共 1 项评测
评测名称 / 模式
得分
排名/总数
BBH
常规模式
74.90
12 / 19

跨能力聚合指数

共 1 项评测
评测名称 / 模式
得分
排名/总数
ECI
unknown
122.06
128 / 167