Claude自动玩崩铁清日常，NUS新论文完整测评AI电脑操控：GUI智能体的黎明

文章预览

奇月 发自 凹非寺 量子位 | 公众号 QbitAI Claude 操控电脑，究竟可以做到什么程度？ 新加坡国立大学团队在20多个场景下做了全面测试，其中最引人瞩目的是：AI可以自动玩手游清日常任务了！ 研究中选用了米哈游 《崩坏：星穹铁道》 ，可以跟它说”帮我完成今天的模拟宇宙”，然后，Claude就会立即依次打开游戏菜单、找到星穹里的”黄金花萼”、自动设置6次挑战次数： 甚至还可以启动自动战斗、等待战斗结束后退出，这一套组合操作简直行云流水…… 而且注意哦，这不仅是传统游戏外挂那样的机械操作，Claude还能智能理解游戏规则和目标，根据界面上不同的任务进行调整。 这下好了，人类只能在一旁干瞪眼了。 除了更多测试场景外，论文还提出了一个开箱即用的 自动GUI框架 。 有网友看到视频后评论说：以后我去上学的时候，就可以让Claude帮 ………………………………