港科技CALMM-Drive: 全新的基于置信感知多模态大模型的自动驾驶框架

文章预览

点击下方 卡片 ，关注“ 自动驾驶Daily ”公众号 戳我->  领取近15个自动驾驶方向路线 >> 点击进入→ 自动驾驶Daily技术交流群 微信扫描以下二维码， 『自动驾驶之心知识星球』 ， 国内最专业的技术和求职交流社区， 和3500人一起卷赢 写在前面 & 笔者的个人理解 决策和运动规划在确保自动驾驶汽车（AV）的安全性和效率方面至关重要。现有的方法通常采用两种范式：决策然后规划或生成然后评分。然而，前者往往难以解决决策和规划之间的不一致问题，而后者在将短期作战效用与长期战术效能相结合方面遇到了重大挑战。为了解决这些问题，我们引入了CALMM Drive，这是一种新的基于置信度感知的多模态大模型自动驾驶框架。我们的方法采用Top-K置信度启发，这有助于生成多个候选决策及其置信水平。此外，我们提出了一种新的规划模块，该模块集 ………………………………