FAM Diffusion：无需训练的高分辨率图像生成新方法

文章预览

FAM Diffusion: Frequency and Attention Modulation for High-Resolution Image Generation with Stable Diffusion 论文： https://arxiv.org/abs/2411.18552v1 FAM Diffusion  是由三星人工智能中心主导研发的一种创新的图像生成方法，用于在稳定扩散模型中生成高分辨率图像。 FAM Diffusion 通过结合频率调制（FM）模块和注意力调制（AM）模块，有效地解决了在高分辨率推断时出现的重复图案和结构失真问题。FM模块利用傅里叶变换域来改善全局结构的一致性，而AM模块则专注于提高局部纹理模式的一致性，这是以往研究中常常忽视的方面。 这种方法不仅能够无缝集成到任何潜在的扩散模型中，而且不需要额外的训练，从而在保持计算效率的同时，显著提升了图像生成的质量和效率。 FAM Diffusion 的特点是它避免了冗余的推断技巧，例如基于补丁或渐进式生成，从而实现了几乎可以忽略不计的延 ………………………………