单项评测榜

SWE-bench Verified 排行榜

500 道人工验证过的真实 GitHub issue 修复任务,评估编码 Agent 解决实际软件工程问题的能力

SWE-bench Verified 数据更新于 2026-08-18

类型
许可
地区
出处
Gemini 3 ProGoogle DeepMind76.2 / 100
GPT-5OpenAI74.9 / 100
Devstral 2Mistral AI72.2 / 100
DeepSeek-V3.2DeepSeek70 / 100
Qwen3-Coder-480B-A35B-Instruct阿里云通义千问 Qwen69.6 / 100
MiniMax-M2MiniMax 稀宇科技69.4 / 100
GLM-4.6智谱 Zhipu/Z.ai68.2 / 100
Kimi K2月之暗面 Moonshot AI65.8 / 100
Claude 3.7 Sonnet已下架Anthropic63.7 / 100
Claude 3.5 Sonnet(2024-10-22 版)已下架Anthropic49 / 100
Llama 4 MaverickMeta21.04 / 100

数据仅供参考,非官方权威判定,请以厂商官方发布为准。