超越Devin！解决接近30%的GitHub issues！最强CodeR来啦！

文章预览

SWE-bench榜单： https://www.swebench.com arXiv链接： https://arxiv.org/pdf/2406.01304 GitHub链接： https://github.com/NL2Code/CodeR 作者单位： 华 为，中科院，新加坡管理大学，北京大学 摘要 最近，GitHub issue 自动消解引起了学术界和工业界的极大关注。普林斯顿大学的 NLP 小组提出了  SWE-bench   [1]  用于自动衡量大模型解决这个任务的能力。在本文中，我们提出了一个新的框架 CodeR，它采用了多智能体（Multi-Agent）和预先定义的任务图（Task Graph）来自动解决 GitHub 的 issues： 1. 修复和解决 issue 中报告的错误（fix bug） 2. 根据issue描述在代码仓库中添加新功能特性（add new feature） 在 SWE-bench-lite 上（SWE-bench 的子集），我们提出的 CodeR 能够通过单次提交解决 28.33% 的 GitHub issues，刷新 SOTA（2024/06/04）！ 背景介绍 大语言模型（Large Language Models, LLMs）的快速发展，正在重塑众多 ………………………………