视频生成game-changer来了！贾佳亚团队提出下一代 ControlNet

文章预览

关注公众号，发现CV技术之美 在人工智能领域，生成模型尤其是扩散模型，已经在图像、视频生成方面展现出了卓越的能力。近日，更强大的game-changer来了！ 贾佳亚团队提出ControlNeXt，一种强大而高效的图像和视频生成控制方法，被众网友评为下一代的ControlNet。 项目主页：https://pbihao.github.io/projects/controlnext/index.html 论文地址：https://arxiv.org/abs/2408.06070 GitHub：https://github.com/dvlab-research/ControlNeXt 相比ControlNet，它仅用不到10%的训练参数，可实现一样的生成效果，而且生成、收敛的速度更快，并完美适配SDXL、SD1.5、svd等模型，让即插即用成为现实。 轻量级，即插即用 作为一个轻量级、即插即用模块，ControlNeXt可与其他LoRA权重集成，无需额外培训即可改变生成风格。 研究团队为了证明ControlNeXt的鲁棒性和通用性，在各种Stable Diffusion模型实现该方法，SD1.5 ………………………………