自动驾驶系统中的XLM：综述

文章预览

点击下方 卡片 ，关注“ 自动驾驶专栏 ”公众号 自动驾驶干货 ，即可获取 论文链接： https://arxiv.org/pdf/2409.10484 摘要 本文介绍了自动驾驶系统中的XLM：综述。大型语言模型（LLMs）在各种信息处理任务中展现出卓越的熟练度。这些任务从提取数据和汇总文献到生成内容、预测建模、决策和系统控制。此外，代表下一代语言模型（即XLM）的视觉大模型（VLMs）和多模态LLMs（MLLMs）通过语言理解的优势，可以结合并且集成很多数据模态，从而推进若干种基于信息的系统，例如自动驾驶系统（ADS）。事实上，通过将语言通信与多模态传感器输入（例如全景图像和激光雷达或者雷达数据）相结合，可以采取准确的驾驶行为。在此背景下，本篇综述全面概述了XLMs实现自动驾驶的潜力。具体而言，本文回顾了ADS和XLMs的相关文献，包括它们的架构、工具和框架。 ………………………………