DataLearner 标志

Mistral-7B-Instruct-v0.3 评测详情

Mistral-7B-Instruct-v0.3 当前已收录的代表性评测结果包括 MBPP(41 / 69,得分 51.10)、MMLU(85 / 124,得分 64.20)、ARC(3 / 4,得分 60)。

评测结果

Mistral-7B-Instruct-v0.3

评测结果

思考模式

综合知识考试

共 2 项评测
评测名称 / 模式
得分
排名/总数
MMLU
常规模式
64.20
85 / 124
MMLU-Pro
常规模式
30.90
163 / 175

数学

共 2 项评测
评测名称 / 模式
得分
排名/总数
GSM8K
常规模式
36.20
52 / 68
MATH
常规模式
10.20
41 / 42

程序生成与编辑

共 2 项评测
评测名称 / 模式
得分
排名/总数
MBPP
常规模式
51.10
41 / 69
HumanEval
常规模式
29.30
82 / 101

常识推理

共 1 项评测
评测名称 / 模式
得分
排名/总数
ARC
常规模式
60
3 / 4

综合推理

共 1 项评测
评测名称 / 模式
得分
排名/总数
BBH
常规模式
56.10
18 / 19

科学知识与推理

共 1 项评测
评测名称 / 模式
得分
排名/总数
GPQA Diamond
常规模式
24.70
252 / 253