JAMA子刊：ChatGPT回答医学考试题的正确率有多高？

文章预览

ChatGPT之类的大型语言模型（LLMs）在医学中的应用非常广泛，从协助临床医生完成文书任务或临床决策，到为患者提供医疗咨询等。与专业医护人员一样，我们可以 通过标准化测试来评估LLM的医学知识 。 2024年6月18日，《JAMA Network Open》发表了一项横断面研究，评估了 LLMs回答肿瘤专业考试题的准确性 。 原文链接： https://jamanetwork.com/journals/jamanetworkopen/fullarticle/2820094 研究方法 研究设计 这项横断面研究在2023年5月28日-10月11日进行，由于不涉及人类参与者，因此无需获得伦理委员会的批准，也无需知情同意。 试题来源 （1）ASCO Connection网站上有一个可公开访问的题库（ASCO 肿瘤学自我评估）。 题库有52道题，题型为选择题 ，有唯一正确答案。官网提供了正确答案，且有对答案的解释和参考资料。 （2）ESMO在2021年和2022年发布的考试试题，专为参加ESMO ………………………………