AnimateDiff 插件的下载地址如下:
安装地址:D:\ComfyUI\ComfyUI_windows_portable\ComfyUI\custom_nodes
模型位置:下载对应的模型并存放在指定位置并重命名,文件夹位置如果没有此文件需要新建并重命名,具体如下:
推荐工作流:
D:\ComfyUI\ComfyUI_windows_portable\ComfyUI\custom_nodes[heading1]三、模型位置[content]下载对应的模型并存放在指定位置并重命名,文件夹位置如何没有此文件需要新建并重命名,具体如下:点击即可直接下载下载运动的模块:https://huggingface.co/guoyww/animatediff/tree/cd71ae134a27ec6008b968d6419952b0c0494cf2D:\ComfyUI\custom_nodes\ComfyUI-AnimateDiff-Evolved\modelsD:\ComfyUI\custom_nodes\ComfyUI-AnimateDiff-Evolved\motion_lora[heading1]四、推荐工作流[content]file:h264-mp4.jsonfile:h265-mp4.jsonfile:webm.jsonfile:av1-webm.jsonfile:1.5文生视频工作流.json
[谷歌公布无限长度上下文的方案](https://arxiv.org/abs/2404.07143)Infini-attention为Transformer语言模型打开了高效处理超长文本的大门,有望在对话、问答、摘要、检索等领域大幅拓展语言模型的应用范围和性能上限。它简洁优雅的设计也为后续研究指明了可能的方向,即进一步探索基于神经记忆(而非显式存储)的高效注意力机制。Open Sora plan团队发布了另一个视频生成项目MagicTime。只可以制作变形时光延续视频,比如花朵开放,冰块融化等,能够学习并应用现实世界的物理规律已经放出了代码实现。详细介绍:首先开发了一套名为MagicAdapter的技术,通过分开处理空间和时间训练,它能从变形视频中提取更多的物理知识,并使预训练的T2V模型能够生成这类视频。接着,引入了动态帧提取策略,这个策略特别适用于变形时光延续视频,因为这类视频变化范围广泛,涵盖了物体戏剧性的变化过程,从而包含了更丰富的物理知识。还设计了一种名为Magic Text-Encoder的工具,用以提升对这类变形视频提示信息的理解。此外,还特别创建了一个名为ChronoMagic的时光延续视频-文本数据集,旨在提升变形视频生成的能力。Kijia已经将这个项目的模型与Animatediff原本的Motion Lora以及模型合并。现在直接下载模型就可以在ComfyUI的Animatediff插件中使用。模型下载:https://huggingface.co/Kijai/MagicTime-merged-fp16
在管理器中节点管理搜索ComfyUI-IC-Light,安装后重启ComfyUI模型可以在网盘里,下载后放入ComfyUI/models/unet文件夹IC Light是用来处理原视频和新背景之间的光影效果的。[heading4]Animatediff[content]这个部分根据实际情况,可以开启或者关闭取决于视频的流畅度。