专栏名称: 阿里研究院
阿里研究院依托阿里巴巴集团海量数据、深耕小企业前沿案例、集结全球商业智慧,以开放、合作、共建、共享的方式打造具影响力的新商业知识平台。 阿里研究,洞察数据,共创新知! 官方网站http://www.aliresearch.com/
今天看啥  ›  专栏  ›  阿里研究院

技术之辩 | Dario Amodei:Scaling Law 还没遇到上限

阿里研究院  · 公众号  · 电商  · 2024-11-25 15:11

主要观点总结

Anthropic CEO Dario Amodei 在 Machines of Loving Grace 中对 AGI 对世界的影响进行了预言,认为 Powerful AI 预计会在 2026 年实现,并将科研进展压缩到 5-10 年。Dario 解释了 AI 可能带来的机会,并分享了关于模型训练和产品的细节,包括 scaling law、RL、Compute Use 等。他强调了 Anthropic 的 RL 优势,并提到了 Sonnet 3.5 模型。他还指出,为了安全性,Computer Use 暂时不会直接面向 To C 开放,而是以 API 形式发布。Dario 分享了 AGI 在生物学和医学领域推动突破性进展的愿景,以及科学家和 AI 系统未来可能的工作模式。最后,他讨论了 AI 人才和技术的未来,以及 AI 安全性和责任性。

关键观点总结

关键观点1: Anthropic 的预言

Dario Amodei 预测 Powerful AI 将在 2026 年实现,并将科研进展压缩到 5-10 年。

关键观点2: AI 的机会和模型训练细节

Dario 解释了 AI 可能带来的机会,并分享了关于模型训练和产品的细节,包括 scaling law、RL、Compute Use 等。

关键观点3: Anthropic 的 RL 优势

Dario 强调了 Anthropic 的 RL 优势,并提到了 Sonnet 3.5 模型。

关键观点4: Computer Use 的安全性

为了安全性,Computer Use 暂时不会直接面向 To C 开放,而是以 API 形式发布。

关键观点5: AGI 在生物学和医学领域的应用

Dario 分享了 AGI 在生物学和医学领域推动突破性进展的愿景,以及科学家和 AI 系统未来可能的工作模式。

关键观点6: AI 人才和技术的未来

Dario 讨论了 AI 人才和技术的未来,以及 AI 安全性和责任性。


文章预览

以下文章来源于海外独角兽: 编译:牛佳晨 Anthropic CEO Dario Amodei 在  Machines of Loving Grace  里对 AGI 对世界的影响进行了预言:Powerful AI 预计会在 2026 年实现,足够强大的 AI 也能够将把一个世纪的科研进展压缩到 5-10 年实现(“Compressed 21st Century”),在他和 Lex Fridman 的最新对谈中,Dario 具体解释了自己对于 Powerful AI 可能带来的机会的理解,以及 scaling law、 RL 、Compute Use 等模型训练和产品的细节进行了分享: •  Scaling law 目前尚未见顶, 合成数据和 reasoning models 可能是解决数据限制的方案, •  未来 post-training 环节的成本可能会超过 pre-training,只靠人类很难提高模型质量,需要更 scalable 的监督方法, •  Anthropic 的优势之一就是 RL,并且可能是做 RL 做得最好的, •  Anthropic 内部的工程师认为 Sonnet 3.5 是第一个能帮他们节省时间的模型,但团 ………………………………

原文地址:访问原文地址
快照地址: 访问文章快照
总结与预览地址:访问总结与预览