DataLearner logoDataLearnerAI
Latest AI Insights
Model Evaluations
Model Directory
Model Comparison
Resource Center
Tool Directory

加载中...

DataLearner logoDataLearner AI

A knowledge platform focused on LLM benchmarking, datasets, and practical instruction with continuously updated capability maps.

产品

  • Leaderboards
  • 模型对比
  • Datasets

资源

  • Tutorials
  • Editorial
  • Tool directory

关于

  • 关于我们
  • 隐私政策
  • 数据收集方法
  • 联系我们

© 2026 DataLearner AI. DataLearner curates industry data and case studies so researchers, enterprises, and developers can rely on trustworthy intelligence.

隐私政策服务条款
  1. Back to benchmark list
  2. /
  3. IC SWE-Lancer(Diamond)

IC SWE-Lancer(Diamond) 评测基准详情

更新2026-03-08
Views537
问题数量
237
发布机构
OpenAI
评测类别
编程与软件工程
评测指标
Pass @K
支持语言
英文
难度等级
高难度

简介

OpenAI开源的评测大模型解决独立软件工程任务能力的评测基准

相关资源

查看原始论文
阅读学术论文原文
获取数据集
下载评测数据集
访问官网
浏览项目官方网站
DataLearner 介绍
中文详细解读

IC SWE-Lancer(Diamond) Model Score Leaderboard

Source: DataLearnerAI

Data sourced primarily from official releases (GitHub, Hugging Face, papers), then benchmark leaderboards, then third-party evaluators. Learn about our data methodology

模式说明:
normal
thinking
low
medium
high
deeper thinking
parallel_thinking
图表加载中...

详细评测数据

No parallel thinking results available

IC SWE-Lancer(Diamond)详细排名数据表格

排名模型
1
GPT-5.3 Codexdefault
81.42026-02-05未知
2
GPT-5.1思考模式 High（无工具）
69.72025-11-12未知
3
GPT-4.1 minidefault
332025-04-14未知
4
GPT-4.5default
32.62025-02-28未知
5
GPT-4odefault
23.32024-05-13未知
6
GPT-4.1 nanodefault
15.32025-04-14未知
7
GPT-4.1default
14.42025-04-14未知