专栏名称: 专知
专知,为人工智能从业者服务,提供专业可信的人工智能知识与技术服务,让认知协作更快更好!
今天看啥  ›  专栏  ›  专知

AI+汽车智能化系列之五:大模型技术综述,54页pdf

专知  · 公众号  ·  · 2024-06-02 14:00
    

文章预览

何谓“大模型”?大数据喂养神经网络算法,设定规则机制使其自成长。1)多模态数据是基础, 包括文本/图像/音频/视频等在内的多类型数据喂养,驱动算法更好完成理解/生成等任务。2) Transformer是核心,Self-Attention机制强化算法抽象特征提取能力,并支持并行计算,高能 且高效,衍生ViT/DiT支持多模态数据理解/生成。3)ChatGPT及Sora为代表应用,在大参数加 持下,开发多模态自然语言处理以及文生视频等功能。4)世界模型为未来方向,算法能力由数据 驱动演变为认知驱动,模型具备反事实推理和理解物理客观规律的能力,提升通用泛化特性。  ◼ 大模型重塑车端算法架构,加速云端算法迭代;世界模型或为完全自动驾驶最优解。智驾一阶段 (L2~L3)脱胎换骨:由场景驱动转向数据驱动,大模型带来底层架构质变;智驾二阶段 (L3~L4)厚积薄发 ………………………………

原文地址:访问原文地址
快照地址: 访问文章快照
总结与预览地址:访问总结与预览