专栏名称: AINLPer
一个专注自然语言处理(NLP)方向的公众号。机器学习(ML)、深度学习(DL)、自然语言处理相关模型理解、热门论文(Paper)分享分析、pytorch、C++、Python、Java ...
今天看啥  ›  专栏  ›  AINLPer

超越Devin!华为等| 解决接近30%的GitHub issues!最强CodeR来啦!

AINLPer  · 公众号  ·  · 2024-06-23 22:00
    

文章预览

点击上方 “ AINLPer “ ,设为 星标 更多干货,第一时间送达 SWE-bench榜单: https://www.swebench.com arXiv链接: https://arxiv.org/pdf/2406.01304 GitHub链接: https://github.com/NL2Code/CodeR 作者单位: 华 为,中科院,新加坡管理大学,北京大学 摘要 最近,GitHub issue 自动消解引起了学术界和工业界的极大关注。普林斯顿大学的 NLP 小组提出了  SWE-bench   [1]  用于自动衡量大模型解决这个任务的能力。在本文中,我们提出了一个新的框架 CodeR,它采用了多智能体(Multi-Agent)和预先定义的任务图(Task Graph)来自动解决 GitHub 的 issues: 1. 修复和解决 issue 中报告的错误(fix bug) 2. 根据issue描述在代码仓库中添加新功能特性(add new feature) 在 SWE-bench-lite 上(SWE-bench 的子集),我们提出的 CodeR 能够通过单次提交解决 28.33% 的 GitHub issues,刷新 SOTA(2024/06/04)! 背景介绍 大 ………………………………

原文地址:访问原文地址
快照地址: 访问文章快照
总结与预览地址:访问总结与预览