性能优于RTX 4090！摩尔线程千卡智算集群助力国产大模型训推

文章预览

以大模型为代表的新一代人工智能技术是引领新一轮科技革命和产业变革的战略性技术和重要驱动力量，随着对算力需求的日益高涨，人工智能算力底座公司日益成为新一波人工智能技术浪潮重要组成部分。 2024年5月，摩尔线程与智谱AI开展了新一轮GPU 大模型适配及性能测试，包括大模型推理以及基于夸娥（KUAE）千卡智算集群的大模型预训练。测试用相关大模型来自智谱AI基座大模型及其开源版本。 测试结果表明，在推理方面，摩尔线程自研全功能GPU显著优于基准对比产品RTX 3090和RTX 4090，在全部测试用例中优于RTX 3090，在多batch下优于RTX 4090；在训练方面，摩尔线程夸娥千卡智算集群训练精度与A100集群误差在1%以内，夸娥千卡智算集群性能扩展系数超过90%，模型算力利用率（MFU）与A100集群相当。 智谱AI致力于打造新一代认知智能大模型，专注于做 ………………………………