专栏名称: 爱可可-爱生活
知名互联网资讯博主 北邮PRIS模式识别实验室陈老师
今天看啥  ›  专栏  ›  爱可可-爱生活

本文通过大规模实证研究发现,小型预训练Transformer可在-20241009051256

爱可可-爱生活  · 微博  · AI  · 2024-10-09 05:12
    

文章预览

2024-10-09 05:12 本条微博链接 本文通过大规模实证研究发现,小型预训练Transformer可在考虑参数大小的情况下,胜过标准压缩算法,但在跨模态迁移学习方面表现较弱,揭示了模型规模对压缩能力和泛化能力的影响,并展现了多模态训练的复杂性。 [LG]《Compression via Pre-trained Transformers: A Study on Byte-Level Multimodal Dat ………………………………

原文地址:访问原文地址
快照地址: 访问文章快照
总结与预览地址:访问总结与预览