ComfyUI MagicTime 延时视频

🎉

作者：CYCHENYUE

来源：开源的Ai知识库

MagicTime项目地址 https://github.com/PKU-YuanGroup/MagicTime?tab=readme-ov-file

该项目的任务是帮助复制 Sora 并提供高质量的视频文本数据和数据注释流水线，以支持 Open-Sora-Plan 或其他基于 DiT 的 T2V 模型。为此，我们首先将我们的 MagicTime 方案集成到基于 DiT 的框架中。具体来说，我们的方法支持用于微调的 Open-Sora-Plan v1.0.0。我们首先通过在相同的注释框架中使用额外的变质地貌延时视频来扩展规模，以获得 ChronoMagic-Landscape 数据集。然后，我们使用 ChronoMagic-Landscape 数据集对 Open-Sora-Plan v1.0.0 进行微调，得到 MagicTime-DiT 模型。