209-A2.1｜多概念视频定制化，结合数据、奖励与指导以增强视频生成，分析时间注意力以提高一致性，噪声结晶化与液体噪声｜Thu

文章预览

AIGC   Research 主编｜ 庄才林（Cailin Zhuang） 技术支持｜胡耀淇（Yaoqi Hu） Topic: Video Generation｜Multi-Concept Customization ‍ ‍ ‍ TweedieMix: Improving Multi-Concept Fusion for Diffusion-based Image/Video Generation 2024-10-08｜KRAFTON, KAIST ｜⭐️ 🟡 http://arxiv.org/abs/2410.05591v1 https://github.com/KwonGihyun/TweedieMix 概述 在文本到图像和视频生成模型的快速发展中， 结合多个个性化概念的生成 仍然是一个具有挑战性的任务。为了解决这一问题，本文提出了TweedieMix， 一种在推理阶段组合定制扩散模型的新方法 。该方法通过 分析反向扩散采样的特性，将采样过程分为两个阶段 。在 初始步骤 中，采用 多对象感知采样技术 ，确保所需目标对象的包含；在 后续步骤 中， 利用Tweedie公式在去噪图像空间中融合自定义概念的外观 。实验结果表明，TweedieMix能够以更高的保真度生成多个个性化概 ………………………………