Adobe提出RGB↔X：可由图片直接输出AO、法线、roughness等，再也不用PS分层了！已开源

文章预览

今天给大家推荐一篇今年 ACM SIGGRAPH 的论文《RGB↔X: Image Decomposition and Synthesis Using Material- and Lighting-aware Diffusion Models》 可以根据图片输出对应的 AO、法线、roughness 等，相当于根据照片反推出了分层图。目前模型已开源。 unset unset 相关链接 unset unset 论文：https://arxiv.org/pdf/2405.00666 代码：https://github.com/zheng95z/rgbx 主页：https://zheng95z.github.io/publications/rgbx24 unset unset 介绍 unset unset 逼真的正向渲染、逐像素逆向渲染和生成图像合成这三个领域看起来似乎是图形和视觉领域中独立且不相关的子领域。然而，最近的研究表明，基于扩散架构的逐像素固有通道（反照率、粗糙度、金属度）的估计有所改善；论文中称之为 RGB→X 问题。该方法进一步表明给定固有通道 X→RGB，合成逼真图像的逆问题也可以在扩散框架中解决。 研究者们专注于室内场景的图像域，引 ………………………………