强化学习和世界模型中的因果推断

文章预览

导读   在强化学习，尤其是世界模型理论中，因果推断的作用是不可替代的，同时在世界模型中，因果推断也能得到很好的应用 。 本次分享主要包括以下几 部分内容： 1.  世界模型 2.  关于强化学习 3.   基于环境模型的强化学习框架 4.  问答环节 分享嘉宾｜ 俞扬 南京大学 教授   编辑整理｜毕东海 内容校对｜李瑶 出品社区｜ DataFun 01 世界模型 “世界模型”源于认知科学，在认知科学里面有一个等价的词汇 mental models，也就是心智模型。那么什么是心智模型？在认知科学里有一个假设，认为人在大脑内部会有一个对于真实外在世界的表征，它对于认知这个世界，特别是推理和决策有很关键的作用。 在心理学中认为 mental model 的核心有两个部分，第一个叫 mental representation，即大脑中对于真实世界是怎么表征的；第二个叫做 mental simulation，即在 ………………………………