SWE-CI基准发布:填补SWE-bench空白,评估AI Agent在CI环境下的真实代码维护能力
尽管大型语言模型(LLM)驱动的Agent在SWE-bench等基准测试中展现了强大的静态Bug修复能力,但成熟软件的实际开发往往依赖于复杂的需求变更和长期的功能迭代,这是传统的静态、单次评估模式所无法覆盖的。为了解决这一脱节问题,本文提出...
标签索引
这个标签下有 1 篇文章。按时间回看相关判断与实践记录。
标签精选
尽管大型语言模型(LLM)驱动的Agent在SWE-bench等基准测试中展现了强大的静态Bug修复能力,但成熟软件的实际开发往往依赖于复杂的需求变更和长期的功能迭代,这是传统的静态、单次评估模式所无法覆盖的。为了解决这一脱节问题,本文提出...