无限天气数据生成！WeatherDG：VLM+扩散模型直接爆拉14个点

文章预览

点击下方 卡片 ，关注“ 自动驾驶之心 ”公众号 戳我->  领取 自动驾驶近15个 方向 学习 路线 今天自动驾驶之心为大家分享英国利兹大学 & 卡内基梅隆大学最新的工作—WeatherDG！基于VLM的无限天气数据生成方案。如果您有相关工作需要分享，请在文末联系我们！ 自动驾驶课程学习与技术交流群事宜，也欢迎添加小助理微信AIDriver004做进一步咨询 >> 点击进入→ 自动驾驶之心 『 自动驾驶 』 技术交流群 论文作者  | Chenghao Qian等 编辑 | 自动驾驶之心 摘要 在这项工作中，我们提出了一种新颖的方法，名为WeatherDG，它可以通过两个基础模型的合作，即Stable Diffusion（SD）和大型语言模型（LLM），生成大量逼真、多样化的天气驾驶场景图像。具体来说，我们首先使用源数据对SD进行微调，使生成的样本内容和布局与真实驾驶场景保持一致。然后，我们基于LL ………………………………