【DrivingDojo：开源自动驾驶数据集，推进交互式和知识丰富的驾驶世界模型发展】

文章预览

“DrivingDojo Dataset: Advancing Interactive and Knowledge-Enriched Driving World Model” 是一项由中国科学院自动化研究所、中国科学院大学、美团和中国科学院香港科学创新研究院共同完成的研究工作。这项研究介绍了一个名为 DrivingDojo 的数据集，旨在推进交互式和知识丰富的驾驶世界模型的发展。 DrivingDojo 数据集包含约 18,200 个视频片段，专门模拟真实世界的视觉交互，涵盖了丰富的驾驶动作、多智能体交互和开放世界的驾驶知识。该数据集的特点在于其完整性的动作、多主体交互以及丰富的开放世界驾驶知识。它不仅包括了加速、紧急刹车、停车启动等纵向操作，还包括了掉头、超车和变道等横向操作。此外，数据集特别设计了包含大量多主体交互轨迹的视频，例如插入、切断和正面汇入等。DrivingDojo 还包含了稀有事件的视频，如穿越动物、掉落的瓶子和路 ………………………………