Agent 评测
SWE-bench 这类任务级评测。
SWE-agent
SWE-agent·Python
把 GitHub issue 直接丢给大模型,自动定位代码并生成修复补丁,还能用于安全攻防和竞赛编程。
代码修复+4Agent 评测硬核
20779+272.3kv1.1.02026-11-09 22:24 UTC
evals
openai·Python
用于评测大语言模型及 LLM 系统的框架,同时提供开源基准测试注册表,方便对比不同模型和系统的表现。
LLM评测+4Agent 评测进阶
19726+133.1k2026-04-14 15:29 UTC
SWE-bench
SWE-bench·Python
用真实 GitHub issue 评测语言模型能否自动修复代码缺陷的基准测试集,为代码智能体能力提供可复现的量化对比。
代码智能体+4Agent 评测进阶
6169+91.1k2026-09-18 05:08 UTC