聊天机器人胡说八道？牛津研究人员利用语义熵来识破 AI“幻觉”

文章预览

IT之家 6 月 24 日消息，近年来，人工智能蓬勃发展，聊天机器人等应用逐渐普及，人们可以通过简单的指令从这些聊天机器人（例如 ChatGPT）获取信息。然而，这些聊天机器人仍然容易出现“幻觉”问题，即提供错误的答案，有时甚至是危险的信息。 图源 Pexels 造成“幻觉”的原因之一是训练数据不准确、泛化能力不足以及数据采集过程中的副作用。不过，牛津大学的研究人员另辟蹊径，在最新出版的《自然》杂志上详细介绍了一种他们新开发的方法，用于检测大型语言模型 (LLMs) 的“捏造” (即任意生成的不正确信息) 问题。 LLM 通过在训练数据中寻找特定模式来生成答案。但这种方法并非总是奏效，就像人类能从云朵形状中看到动物一样，AI 机器人也可能找到并不存在的模式。然而，人类知道云朵只是形状而已，天上并没有漂浮的巨型大象。LLM ………………………………