FrontierMath 大模型得分排行榜
数据来源:DataLearnerAI
FrontierMath详细排名数据表格
排名
模型
得分
发布时间
参数(亿)
FrontierMath是一个由Epoch AI开发的基准测试套件,包含数百个原创的数学问题。这些问题由专家数学家设计和审核,覆盖现代数学的主要分支,如数论、实分析、代数几何和范畴论。每个问题通常需要相关领域研究人员投入数小时至数天的努力来解决。基准采用未发表的问题和自动化验证机制,以减少数据污染风险并确保评估可靠性。当前最先进的AI模型在该基准上的解决率低于2%,这反映出AI在处理专家级数学推理时的局限性。该基准旨在为AI系统向研究级数学能力进步提供量化指标。
不同模式会显著影响成绩,请在对比榜单时留意标签提示。
提示:若某条记录未显示任何标签,即默认是 normal 常规模式。
常规推理:单步推理,不延长思考、也不调用额外工具。
Thinking 系列:常规延长思考时间,low/medium/high 代表不同耗时或深度,各厂商叫法不同。
Deeper thinking:在 Thinking 基础上进一步延长思考链条,通常意味着更多算力与时间。
允许调用检索、浏览器、代码解释器等外部能力。
并行思考:多线程/多代理协同探索再汇总,通常只在厂商内部实验环境中启用、尚未对外开放,因此被视为“作弊”模式。
数据来源:DataLearnerAI