加载中...

IC SWE-Lancer(Diamond) 评测基准详情

Name: Individual Contributor SWE-Lancer(Diamond)
Creator: OpenAI

问题数量

237

发布机构

OpenAI

评测类别

编程与软件工程

评测指标

Pass @K

支持语言

英文

难度等级

高难度

OpenAI开源的评测大模型解决独立软件工程任务能力的评测基准

IC SWE-Lancer(Diamond) 大模型得分排行榜

数据来源：DataLearnerAI

数据优先来自官方发布（GitHub、Hugging Face、论文），其次为评测基准官方结果，最后为第三方评测机构数据。了解数据收集方法

模式说明:

normal

thinking

low

medium

high

deeper thinking

parallel_thinking

图表加载中...

当前榜单暂无并行思考结果

IC SWE-Lancer(Diamond) 评测基准详情 | 大模型排行榜 | DataLearnerAI