专栏名称: AIWalker
关注计算机视觉、图像处理、深度学习等领域的干货分享与前沿paper解读。AIWalker由具有多年算法研究与产品化落地经验的Happy运营,原创为主、同时会转载优秀解读文章。欢迎志同道合的小伙伴们加入一同学习进步。
今天看啥  ›  专栏  ›  AIWalker

开源!优于Domo AI!!阿里Diffutoon:端到端的高质量视频动漫化方法

AIWalker  · 公众号  ·  · 2024-06-26 22:00

文章预览

关注 「 AIWalker 」 并 星标 从此AI不迷路 来源于 AICV与前沿 ,作者 雨沐林风 文章地址:https: //arxiv.org/abs/2401.16224 项目地址:https: //github.com/modelscope/DiffSynth-Studio Diffutoon是一个梦幻般的卡通渲染方法,旨在转换动画风格的逼真视频。它可以处理非常高的分辨率和快速运动,可以做为Domo AI视频转绘的一个平替。 Domo AI 视频转绘官方 Discord 链接:  https://discord.gg/domoai 从实际测试来看, Diffutoon 效果稳定可靠,场景一致性保持 较好,还是非常不错。 缺点就是处理速度较慢,处理一个1024*1024的10多秒的视频(160帧)使用需要差不多40分钟(机器V100);此外,不支持任意视频分辨率的输入。 官方展示效果 本地部署实际测试示例 动漫 - 动漫 真人 - 动漫 01 方法 Diffutoon架构( 顶部是主要的卡通渲染管道,底部是编辑分支 ) Diffutoon 整个方法包括一个主要的卡 ………………………………

原文地址:访问原文地址
快照地址: 访问文章快照
总结与预览地址:访问总结与预览