图像编辑大一统？多功能图像编辑框架Dedit:可基于图像、文本和掩码进行图像编辑。

文章预览

今天给大家介绍一个基于图像和文本的编辑的框架D-Edit，它是第一个可以通过掩码编辑实现图像编辑的项目，近期已经在HuggingFace开放使用，并一度冲到了热门项目Top5。 使用 D-Edit 的编辑流程。用户首先上传一张分割成多个项目的图像。微调 DPM 后，用户可以进行各种类型的控制，包括 (a) 使用文本提示替换模型； (b) 细化分割造成的不完美细节； (c) 将包移到地面； (d) 将手提包替换为参考图另一个手提包； (e) 重塑手提包； (f) 调整模型和手提包的大小； (g) 去除背景。 相关链接 论文地址：https://arxiv.org/pdf/2403.04880 代码链接：https://github.com/collovlabs/d-edit 试用地址：https://huggingface.co/spaces/Collov-Labs/d-edit 论文介绍 基于文本到图像扩散模型 (DPM) 的成功，图像编辑是实现人类与 AI 生成内容交互的重要应用。在各种编辑方法中，提示空间内的编辑因其 ………………………………