SD3 正式开源 Sora同源架构

文章预览

    2月16日伴随着OpenAI世界大模型Sora的发布，stability_ai也发布了其最新的模型Stablediffusion3,如果说一个是音视频方向，一个是图像生成方向，那么两者没有必然的联系，但Sora和Stablediffusion3的架构是出奇的一致，核心部分都是采用了Difusion Transformer的方式(在 Stabl ediffusion 3中称之为DiT )。本次模型参数量不是很大就当8-12G起吧 SD3的更新特点 采用Diffusion Transformer（DiT）架构 ：Stable Diffusion 3.0采用了与Sora相同的DiT架构，这种架构设计使得系统的扩展性更强，能够处理多种类型的输入数据 支持生成视频、3D内容 ：Stable Diffusion 3.0发布时，将包含一套完整的工具，支持生成视频、3D以及更多类型的内容创作 模型参数量的增加 ：从之前的800M参数升级到8亿参数量，这意味着新的模型能够为用户提供更多扩展性选择，同时生成的图片效果更加惊人 图像质量的提 ………………………………