今天看啥  ›  专栏  ›  魔搭ModelScope社区

Flux第四弹-秒级生图,字节开源Hyper-sd支持Flux,支持多LoRA叠加!

魔搭ModelScope社区  · 公众号  ·  · 2024-08-28 18:22
    

文章预览

近期,字节跳动开源的Hyper-sd项目正式支持FLUX.1-dev了,目前支持8步lora和16步lora,和FLUX.1-dev默认的30步对比,速度提升了近4倍!同时,Hyper-sd官方还预告更少生成步数的LoRAs很快也会推出,一整个期待住了! 技术解析 Hyper-SD的框架,旨在解决扩散模型(DMs)多步推理过程中的计算开销问题。该框架将ODE轨迹保持和重写的优势相结合,并在压缩步骤时维持近乎无损的性能。具体来说,它使用轨迹分段一致性蒸馏逐步进行一致蒸馏,在预定义的时间步段内保留原始ODE轨迹。 此外,它还利用人类反馈学习提高模型在低步数情况下的表现,并通过分数蒸馏进一步改善模型的低步数生成能力。实验和用户研究表明,Hyper-SD在SDXL和SD1.5等模型中取得了非常先进的性能。 魔搭社区模型链接: https://modelscope.cn/models/bytedance/hyper-sd HuggingFace模型链接: https://huggingface.c ………………………………

原文地址:访问原文地址
快照地址: 访问文章快照
总结与预览地址:访问总结与预览