AgentReview: 利用 LLM Agents 探究同行评审机制

文章预览

点击蓝字 关注我们 AI TIME欢迎每一位AI爱好者的加入！ 点击  阅读原文  观看作者讲解回放 ！ 在学术界，同行评审制度 （peer review）对论文质量和科学研究公平性至关重要。然而，随着投稿数量激增，以及评审过程更加复杂，传统的评审模式正面临诸多挑战。如评审中的偏见(bias )及评审质量不稳定等。当前很多工作致力于分析并解决这些问题。 传统分析方法  基于对真实数据的统计，不能很好地分析 单个变量对评审结果的影响 。另外，调研真实世界的审稿数据也意味着可能有 隐私泄露 等问题，如审稿人身份。我们提出了 AgentReview，这是 首个基于大型语言模型 （LLM）的同行评审模拟框架 ，有效解决了上述问题。通过AgentReview，我们能够在不使用真实评审数据的情况下，通过控制变量 的对比实验，模拟同行评审过程，分析其中多种隐性因素及 ………………………………