论文简读｜FancyVideo：通过跨帧文本引导实现动态且一致的视频生成，可在消费级显卡上定制｜360 AI 团队×中山大学

文章预览

AIGC   Research 原创｜FancyVideo作者团队，Ao Ma 主编｜ 庄才林（Cailin Zhuang） 技术支持｜胡耀淇（Yaoqi Hu） PaperDaily来源： 170-A｜沉浸式图像质量增强，量化文生图原创性，生成模型流形的局部几何，KAN+GAN；视频跨帧文本引导；3D编辑视为2D修复 机构：360 AI 团队、中山大学｜360 AI Research, SYSU 论文： https://arxiv.org/abs/2408.08189 主页（效果展示）： https://360cvgroup.github.io/FancyVideo/ 代码： https://github.com/360CVGroup/FancyVideo 由360AI团队和中山大学联合提出的FancyVideo是一种基于UNet架构的视频生成模型。 该模型同时具备文生视频和图生视频功能，在消费级显卡（如GeForce RTX 3090）上最高可生成125帧1080p的视频。 此外，该模型还具备下述特点： 可生成任意分辨率、宽高比的视频； 可基于不同SD底模生成不同风格化的视频； 可人工控制视频生成的运动幅度； 衍生模型可完 ………………………………