Video-Infinity:用多个GPU快速生成长视频 5分钟内生成95秒长度
新加坡国立大学的 Learning and Vision Lab 团队最近开发了一款名为 Video-Infinity 的分布式长视频生成工具。该工具能够利用多个 GPU 快速生成长视频,无需对现有模型进行额外训练,每5分钟即可产生95秒长度的2300帧视频。
产品入口:https://top.aibase.com/tool/video-infinity
这款工具具有分布式、高速和免训练等特点,采用 conda 环境进行安装,使用简便。用户可以根据需要进行基本配置、流水线配置和 Video-Infinity 配置,以实现不同的视频生成需求。
同时,为了避免高频信息丢失,建议将本地上下文帧数量与 Attention 模型的全局上下文帧数量之和设置在24以下,以保持视频质量和稳定性。
通过对比实验结果,该技术不仅在视频帧数上具有明显优势,而且在时间成本上也表现出色。技术团队表示,他们的方法在8个 Nvidia Ada6000GPU 的支持下实现了这一成就,而且采用的采样步骤设置为30。
该技术的研究人员还进行了对抗实验,通过消融分析 Clip Parallelism 和 Dual-scope Attention 的效果,结果显示这两个因素对视频生成具有显著影响。此外,该技术还支持多个提示(Multi-Prompts),可以实现背景、风格和主题的平滑过渡,为视频生成提供了更多可能性。
划重点:
⭐️ 该技术能在5分钟内生成具有2300帧的视频,比先前方法快100倍;
⭐️ Clip Parallelism 和 Dual-scope Attention 对视频生成具有显著影响;
⭐️ 支持多个提示(Multi-Prompts),可以实现平滑过渡。
编辑:广州明生医药有限公司
标签:视频,多个,技术,上下文,帧数,可以实现,分布式,平滑,工具,模型