RAW-Diffusion：高保真RAW图像生成的RGB引导扩散模型

文章预览

RAW-Diffusion: RGB-Guided Diffusion Models for High-Fidelity RAW Image Generation 代码： https://github.com/SonyResearch/RAW-Diffusion 论文： https://arxiv.org/abs/2411.13150v1 RAW-Diffusion  是由 Sony AI 联合 汉诺威莱布尼茨大学开发的 一种创新的RGB引导扩散模型，旨在生成高保真RAW图像。 该模型通过从RGB图像中提取特征，并将其融入到多分辨率的反向扩散过程中，实现了对RAW图像的高精度重建。这种方法不仅能够生成具有相机特定特性的RAW数据集，而且展现出了卓越的数据效率，即使在训练样本极少的情况下也能保持高性能。 RAW-Diffusion 的特点在于其RGB引导模块和RGB引导残差块的设计，这些组件使得模型能够有效地利用RGB图像信息来指导RAW图像的生成过程。此外，该模型在对象检测等下游任务中也显示出了显著的性能提升，尤其是在低光照环境下。通过将大规模RGB数据集转换为RAW图像 ………………………………