Andrej & 红杉内部分享：让大模型像人脑一样低功耗运行

文章预览

近日， OpenAI 核心创始成员 Andrej Karpathy （已于 24 年 2 月离职）在红杉资本进行了一场精彩的分享。 Andrej 分享了他关于大模型发展趋势的思考，包括 LLM OS 、新一代算法架构、如何降低大模型的功耗、 AI 时代下的创业机会等重要话题，干货满满，值得细品。 还有一个彩蛋， Andrej 分享了此前在 Tesla 负责FSD时，对 Elon 管理哲学的观察与思考，也非常有趣。 我给大家解读一下这场讲座的精华内容，感兴趣的朋友也可以去亲自听一遍，视频链接放在文末。 （1）大模型生态，将构成新一代操作系统 我喜欢把大模型看成一个操作系统（ OS ），而不只是一个模型。 在传统操作系统中，你需要围绕 CPU 构建一堆外设，比如鼠标和键盘、磁盘存储、以及缓存空间等。 而在LLM OS中，大模型本身就是中央处理器。I/O外设也不再是鼠标和键盘，因为LLM可以兼容更多 ………………………………