大模型是泡沫吗？

文章预览

这篇文章不谈技术，只聊聊这两年从事 llm 工作的一些感悟。 我个人对 llm 是一种很复杂的态度。毕竟， 它真的击碎了我 2023 年之前所有的技术积累，以前在 nlp 苦心钻研的训练经验、模型结构、不同任务类型的不同处理技巧，好像在 ChatGPT 面前显得一文不值 。 不过，事情都有两面性。与我的技术一起被击碎的，还有我那一潭死水的工作内容。我不再是特征工程师 —— “花了几个月的时间，就只为了构造某个能力的数据特征，然后想办法加入到模型网络中”。当领导又想让模型有一个新的能力怎么办，重复这个特征构造的过程，下一个季度的 OKR 也就制定完毕了。我一点都不认为这样的工作节奏能带给我自己、带给我的公司任何有意义的内容。 因此，作为一个曾经研究对话系统的 nlp 码农，即使我过去的知识和工作经验极速贬值，我也认可 llm： ………………………………