DataLearner 标志

Gemini-ultra 评测详情

Gemini-ultra 当前已收录的代表性评测结果包括 MMLU(10 / 124,得分 90.04)、GSM8K(11 / 68,得分 94.40)、HumanEval(47 / 140,得分 74.40)。

评测结果

Gemini-ultra

评测结果

思考模式

综合知识考试

共 1 项评测
评测名称 / 模式
得分
排名/总数
MMLU
常规模式
90.04
10 / 124

数学

共 1 项评测
评测名称 / 模式
得分
排名/总数
GSM8K
常规模式
94.40
11 / 68

程序生成与编辑

共 1 项评测
评测名称 / 模式
得分
排名/总数
HumanEval
常规模式
74.40
47 / 140