加载中...
随着大语言模型（LLM）和视觉语言模型（VLM）向Agent方向快速发展，“让AI像人类一样操作电脑”已成为前沿热点。2024年4月发布的OSWorld基准一经推出，便迅速成为评估多模态智能体在真实计算机环境中执行开放式任务的标杆。而2025年7月推出的OSWorld-Verified则是其重大升级版本，进一步提升了任务质量、可复现性和评估公平性，成为当前最权威的“计算机使用”评测基准。
OSWorld（Open Source World）是首个真正基于真实操作系统环境的多模态Agent评测平台。它不同于传统的模拟环境（如MiniWoB或WebArena），而是直接在完整的Ubuntu、Windows和macOS系统中运行，让AI代理通过截图观察、鼠标键盘操作来完成任务。
核心特点包括：
欢迎关注 DataLearner 官方微信，获得最新 AI 技术推送
早期版本发布后，社区反馈了大量问题（如网页结构变化、指令歧义、评估函数不鲁棒等），这也促使团队推出Verified升级版。
2025年7月28日，XLANG Lab正式发布OSWorld-Verified，这是对原版的一次“原地大修”：
这些改进让OSWorld-Verified成为真正“苹果对苹果”的比较平台，避免了不同机构因环境差异导致的结果不可比。
传统GUI基准往往任务简单、环境受限，而OSWorld-Verified的369个任务更接近真实工作场景：
人类在该基准上的成功率约为72.36%，早期（2024）最佳模型仅12%左右，暴露了大模型在真实电脑操作上的巨大差距。
但随着2025年模型迭代，进展迅猛：
这表明“大模型用电脑”能力正从“基本可用”向“接近人类”迈进，未来办公自动化、个人助理等场景将迎来爆发。
虽然榜单实时变化，但近期亮点包括：
想上Verified榜单？需要联系维护者预约AWS运行，并公开代码/轨迹，确保完全可复现。
OSWorld-Verified不仅是评测基准，更是推动Agent实用化的关键基础设施。它让我们清晰看到：大模型离“真正会用电脑”还有多远，同时也激励着社区不断突破。
如果你正在开发计算机使用Agent，强烈建议在OSWorld-Verified上测试——它会毫不留情地暴露问题，也会给你最真实的进步反馈。
感兴趣的读者可以访问官网：https://os-world.github.io/
GitHub仓库：https://github.com/xlang-ai/OSWorld
未来，让我们拭目以待哪个模型率先超越人类72.36%的基准线！
