入坑大模型18个月的反思与贩私

文章预览

作者：Minogame https://zhuanlan.zhihu.com/p/71740269 前几天开完一个有高层参加的会议，会后组里的技术大佬直接就开喷“要规划没规划，整天只知道对着几个糊弄老板的榜使劲刷”。我下意识地赶紧去拉住他，低声对他讲“你声音太小了，老板听不到的，回头我领你去大厦的保安室，你用紧急通报的喇叭讲给全楼的人听”。他仿佛意识到了什么，便回我若要率十余众攻入保安室需要准备什么样的装备以及后勤物资，于是会议的内容就这么愉快的被遗忘了。 做回工位上，暮然回首发现自己已经入了这个坑一年半了，反思起来也收获确实有一些，例如Megatron/DS/TE/FA等等核心实现，例如强化学习的世界观以及其与最优化领域世界观的融合。但是如果要用一个短语来描述我当下的心境，那必然是“跳坑救不了世界”，弃坑从文也救不了，我们这个业界从底层的逻 ………………………………