文章预览
文:王智远 | ID:Z201440 昨天有提到,为什么要研究语言模型。 原因主要有两点: 一,乔姆斯基认为,语言是思考的工具。 要理解人类的心智,必须研究语言,语言和心智是密切相关,我们的主要观点是“压缩论”,人工智能可以表现为一种压缩的形式。 二,语言非常重要。 没有语言,人类的高级思考就无法进行。因此,语言不仅是知识的载体,还是一种高度抽象的符号系统。 那么,为什么选择语言模型进行研究,而不是研究图像、声音或其他类型的数据呢?很简单, 语言文本的数据压缩更方便,也更省钱。 我把听课的内容总结了一下,仔细看后发现,历史发展脉络非常有趣,总结起来就是四个字:压缩即智能。 为什么这么说呢?14世纪,英格兰有个逻辑学家,名叫威廉·奥卡姆(约1285年至1349年),他提出了一个很有名的原则,叫做 「 奥卡
………………………………