专栏名称: AIGC Studio
一个有趣有AI的AIGC公众号:关注AI、深度学习、计算机视觉、AIGC、Stable Diffusion、Sora等相关技术。这里不仅有简单易懂的AIGC理论实践和AI学习路线,还有大厂工作经历和体会分享。如果有幸能给你一些帮助就更好啦!
今天看啥  ›  专栏  ›  AIGC Studio

MimicBrush,可模仿参考图进行零样本图像编辑。

AIGC Studio  · 公众号  ·  · 2024-10-04 00:00

文章预览

阿里和港大提出的MimicBrush可以通过对参考图模仿进行零样本图像编辑。将一张图片的某一部分融合到领一张图片上去。用在电商商品展示上或者单纯的图片编辑和内容迁移很有用。从官方演示来看效果也很好。 MimicBrush,它会随机选择视频剪辑中的两帧,遮盖其中一帧的某些区域,并学习使用另一帧的信息恢复这些被遮盖的区域。通过MimicBrush这种方式,模型基于扩散先验发展而来,能够自监督地捕捉不同图像之间的语义对应关系。 MimicBrush 产生的编辑结果多种多样,用户只需在源图像中指定要编辑的区域(即白色蒙版),并提供一个野生参考图来说明编辑后该区域的效果。模型会自动捕获它们之间的语义对应关系,并在一次执行中完成编辑。 相关链接 论文地址:https://arxiv.org/abs/2406.07547 代码地址:https://github.com/ali-vilab/MimicBrush 项目主页:https://x ………………………………

原文地址:访问原文地址
快照地址: 访问文章快照
总结与预览地址:访问总结与预览