Navigate to WaytoAGI Wiki →
Home/Question List/Question Detail

如何把静态的图片动起来

Answer

以下是一些可以将静态图片动起来的方法和工具:

  1. 使用 VIGGLE 工具:
    • Mix 模式:先上传一个视频和一张角色图像,Viggle 会自动将视频的动态赋予给这个角色,形成新视频。它能模拟出角色的 3D 状态,准确还原身体旋转、四肢交叠等动作,也可以利用现有的模版视频作为动作获取来源。
    • Multi 模式:通过视频的动作,将上传的多个角色进行识别并赋予动作,形成新视频。
    • Move 模式:将视频的动作直接映射在图片人物身上,实现“让静态图动起来”。
    • 案例:Rane.m4v,结合 Midjourney 制作图片。
  2. LiveSketch:为素描“注入生命”,通过文本提示将静态素描动画化。
    • 应用场景:FlipaClip 提供的服务方向+LiveSketche 可更便捷生成动画;简笔画替换成骨骼图+controlnet+帧图可生成动态漫;简笔画替换成骨骼图+runway 控制可生成动态视频。
    • 技术特点:能够将单一主题的静态素描转换成动画,用户只需提供描述所需动作的文本提示,系统就会生成短动画。通过修改描述运动的提示文本,还可以控制生成结果的程度。
  3. 使用 Camera Motion:
    • 上传图片:点击“AddImage”上传图片。
    • 输入提示词:在“Prompt”中输入提示词。
    • 设置运镜方向:选择想要的运镜方向,输入运镜值。
    • 设置运动幅度:运动幅度和画面主体运动幅度有关,与运镜大小无关,可设置成任意值。
    • 其它设置:选择好种子(seed),是否高清(HD Quality),是否去除水印(Remove Watermark)。
    • 生成视频:点击“create”生成视频。
Content generated by AI large model, please carefully verify (powered by aily)

References

视频工具:VIGGLE

先上传一个视频和一张角色图像,Viggle会自动将视频的动态赋予给这个角色,形成一段新视频。而且Viggle并非只能生成简单的正面动作,它能模拟出角色的3D状态,这样即使原视频中有身体旋转、四肢交叠等动作,Viggle也能准确进行还原处理。(也可以利用现有的模版视频作为动作获取来源)[heading2]2、Multi(多人模式)[content]同样通过视频的动作,将上传的多个角色进行识别并赋予给这个角色,形成一段新视频。[heading2]3、Move(将视频的动作直接映射在图片人物身上)[content]不同于Mix的图片元素替换原视频内容,Move主要是通过将动作映射在图像里面的人物身上,实现“让静态图动起来”。[heading2]案例:[content][Rane.m4v](https://bytedance.feishu.cn/space/api/box/stream/download/all/Y26ybfOKGo7K3JxVfQScWmaCnre?allow_redirect=1)结合Midjourney制作图片再

Han:基于现有能力项目应用的思考

|技术名称|应用场景|技术类型|简介|主要特点|工作原理|其他|官方网站|项目及演示|论文|Github|在线体验|附件|最后更新时间||-|-|-|-|-|-|-|-|-|-|-|-|-|-||LiveSketch:为素描“注入生命”通过文本提示将静态素描动画化|1、FlipaClip提供的服务方向+LiveSketche=更便捷的动画生成。<br>2、简笔画替换成骨骼图+controlnet+帧图=动态漫?<br>3、简笔画替换成骨骼图+runway控制=动态视频?|3D动画人物,图片|该技术能够将单一主题的静态素描转换成动画。<br>用户只需提供描述所需动作的文本提示,系统就会生成短动画。<br>通过修改描述运动的提示文本,你还可以控制生成结果的程度。<br>比如,如果你画了一只猫,并用文字描述它在跳跃,这个系统就能制作出一只跳跃的猫的动画。<br>它为任何人提供了一种简单直观的方法,使他们的素描变得生动活泼。这对于讲故事、插图、网站、演示文稿等领域都非常有用。|主要功能<br>•动画化静态素描:该技术能够将单一主题的静态素描转换成动画。用户只需提供描述所需动作的文本提示,系统就会生成短动画。<br>•基于文本到视频的先验:这种方法利用了大型预训练的文本到视频扩散模型的运动先验,

Camera Motion 使用教程

点击"AddImage"上传图片。[heading2]2.输入提示词[content]在“Prompt”中输入提示词。[heading2]3.设置运镜方向[content]选择您想要的运镜方向,输入[运镜值](https://waytoagi.feishu.cn/docx/Ci9yd5xu2o46rXxNofdcnqH9nXb#doxcniTMBNtWHj6MSpXvB2DTyUh)。(下图中所示为向右运镜)[heading2]4.设置运动幅度[content]运动幅度和画面主体运动幅度有关,与运镜大小无关,可以设置成您想要的任意值。[heading2]5.其它[content]选择好种子(seed),是否高清(HD Quality),是否去除水印(Remove Watermark)。[heading2]6.生成视频[content]点击“create”,生成视频。

Others are asking
静态图片如何通过ai生成动图
以下是将静态图片生成动图的两种方法: 方法一:使用 LivePortrait 1. LivePortrait 可以精确控制眼睛和嘴唇的动作,还能无缝拼接多个肖像,将不同人物特征合并成一个视频,确保过渡自然流畅。 2. 它使用了一种不同于主流扩散方法的隐式关键点框架,在计算效率和可控性之间取得了有效的平衡。生成的动画质量优于现有的非扩散和扩散模型方法。在 RTX 4090 GPU 上,生成速度为每帧 12.8 毫秒,效率显著高于现有的扩散模型。 3. 支持各种风格的图片,常见的动物面部迁移,并可以微调面部运动幅度。 4. 工作流与模型地址: https://pan.baidu.com/s/1FkGTXLmM0Ofynz04NfCaQ?pwd=cycy https://pan.quark.cn/s/8dfd7ace4f05 5. 教程: 在 comfyui 里使用工作流、模型:https://pan.baidu.com/s/1FkGTXLmM0Ofynz04NfCaQ?pwd=cycy 安装包解压即用链接:https://pan.baidu.com/s/1fh9vvLk8OHuIlCJxD7jiBg?pwd=282n 提取码:282n 项目地址:https://github.com/KwaiVGI/LivePortrait 节点地址:https://github.com/kijai/ComfyUILivePortraitKJ 方法二:使用星流一站式 AI 设计工具的图生图功能 1. 图生图功能允许用户上传一张图像,并基于该图像生成新的视觉内容。 2. 应用图生图: prompt 输入框下,点击“图生图”上传本地文件。 无限画布中,在图片功能区进行选择。 3. 调整“图生图”功能区参数: 参考程度: 更像原图:小幅度修改基底图像,有限的增加元素。 更创意:大幅度修改基底图像,可搭配增强模型加入更多的元素。 自定义:可自定义修改重绘幅度。 增加参考纬度:点击添加按钮,会自动的应用并打开“生成器”的图片参考功能。 替换图像:鼠标滑动到图像,点击“选择参考图”即可重新选择图片。 转换提示词:反推参考图信息填入进提示词框中。 同步生图尺寸:同步参考图尺寸到“生成器”的生图尺寸中。
2025-01-20
静态图生成动态图的工具有吗
以下是一些可以将静态图生成动态图的工具: 1. Comfyui LivePortrait: 可以精确控制眼睛和嘴唇的动作,无缝拼接多个肖像,将不同人物特征合并成一个视频,确保过渡自然流畅。 使用了不同于主流扩散方法的隐式关键点框架,在计算效率和可控性之间取得有效平衡。 生成的动画质量优于现有的非扩散和扩散模型方法,在 RTX 4090 GPU 上,生成速度为每帧 12.8 毫秒。 支持各种风格的图片,常见的动物面部迁移,并可以微调面部运动幅度。 工作流与模型地址: https://pan.baidu.com/s/1FkGTXLmM0Ofynz04NfCaQ?pwd=cycy https://pan.quark.cn/s/8dfd7ace4f05 内容依技术发展更新,请以文档为准 https://xiaobot.net/post/74238a84d2734b2ca195ed2858b24ffe 2. 视频工具 VIGGLE: Mix(让视频的动作映射到图片人物身上):先上传一个视频和一张角色图像,Viggle 会自动将视频的动态赋予给这个角色,形成一段新视频。能模拟出角色的 3D 状态,准确还原处理原视频中身体旋转、四肢交叠等动作。(也可以利用现有的模版视频作为动作获取来源) Multi(多人模式):通过视频的动作,将上传的多个角色进行识别并赋予给这个角色,形成一段新视频。 Move(将视频的动作直接映射在图片人物身上):不同于 Mix 的图片元素替换原视频内容,Move 主要是通过将动作映射在图像里面的人物身上,实现“让静态图动起来”。 案例: 评价: :https://x.com/imxiaohu/status/1771173928591093940 兄弟们,又出来个牛 P 玩意阿里那个被截胡了,这个直接能用可以直接通过文字描述让任何静态图动起来,而且能做各种动作,跳舞什么的都是小 case...最牛 P 的是,他们的模型能能理解真实世界的物理运动原理,所以出来的视频很真实。不仅如此,它还能直接文字生成视频,进行各种角色混合和动作替换...其核心技术基于 JST1 模型。JST1 是首个具有实际物理理解能力的视频3D 基础模型,能够根据用户的需求,让任何角色按照指定的方式进行运动。核心功能: 可控制的视频生成:用户可以通过文字描述指定角色的动作和场景的细节,Viggle 将根据这些指示生成视频。 基于物理的动画:JST1 模型的一个显著特点是其对物理原理的理解,这意味着生成的视频不仅看起来真实,而且角色的动作和互动符合实际物理规律。这提高了视频的质量和真实感。 3D 角色和场景创建:Viggle 不仅限于传统的 2D 视频制作,它还能够创建 3D 角色和场景。
2025-01-11
那款AI可以让静态变动态I
以下是一些可以让静态变动态的 AI 工具和方法: 1. Hailuo AI 推出的 I2V01Live 新功能,能够为静态 2D 插画加入流畅动画,赋予角色生命力,支持多种艺术风格,动作细节表现真实流畅。相关链接: 2. 腾讯 Hunyuan 是 130 亿参数开源视频模型,能生成高质量视频,动作连贯自然,镜头切换灵活,具备强大语义跟随能力。官网: 3. 可以通过教程学习用 AI 制作动画视频播客,比如五步学会的方法。相关链接: 4. 可以使用即梦、runway 等工具,比如在剪映里添加 PNG 透明底图并导出。
2024-12-18
静态动物图片,生成说话视频
以下是一些能够将静态动物图片生成说话视频的技术和相关信息: VividTalk:单张照片和一段音频可生成看似真实的说话视频,支持多种语言和风格,如真实和卡通风格,由南京大学、阿里巴巴、字节跳动和南开大学合作开发。链接:https://x.com/xiaohuggg/status/1732026172509421697?s=20 腾讯 AniPortrait:根据音频和静态人脸图片生成逼真的动态视频,支持多种语言、面部重绘、头部姿势控制,比阿里 EMO 项目先开源。链接:https://github.com/ZejunYang/AniPortrait 、https://arxiv.org/abs/2403.17694 、https://x.com/imxiaohu/status/1772965256220045659?s=20
2024-11-13
文字生成图片的ai有哪些
以下是一些文字生成图片的 AI 工具: 1. DALL·E:由 OpenAI 推出,能根据输入的文本描述生成逼真的图片。 2. StableDiffusion:开源的文生图工具,可生成高质量图片,支持多种模型和算法。 3. MidJourney:因高质量的图像生成效果和用户友好的界面设计受到广泛欢迎,在创意设计人群中尤其流行。 您还可以在 WaytoAGI 网站(https://www.waytoagi.com/category/104)查看更多文生图工具。 此外,在小学课堂的课程设计中,关于文字生成图片的部分,可先准备一些关键词,如“夜晚的未来城市风景,霓虹灯和飞行汽车”“超现实主义风景,漂浮的岛屿和瀑布云”等,输入 Mid Journey 生成图片并保存,用于课堂展示。同时让学生共创,每人说几个关键词,放入 Mid Journey 查看生成效果,也可展示事先用 SD 制作的作品。通过这些案例和互动,让学生理解 AI 绘图在创意增强、效率提升、降低技能门槛和探索新艺术形式方面的好处。
2025-01-21
图片生成视频的ai有哪些
以下是一些图片生成视频的 AI 工具: 1. Pika:是一款出色的文本生成视频 AI 工具,擅长动画制作,并支持视频编辑。 2. SVD:如果熟悉 Stable Diffusion,可以安装这款最新的插件,在图片基础上直接生成视频。它是由 Stability AI 开源的 video model。 3. Runway:老牌 AI 视频生成工具,提供实时涂抹修改视频的功能,但需要收费。 4. Kaiber:视频转视频 AI,能够将原视频转换成各种风格的视频。 5. Sora:由 OpenAI 开发,可以生成长达 1 分钟以上的视频。 更多的相关网站可以查看:https://www.waytoagi.com/category/38 。 另外,使用快影(可灵)处理图片生成视频的步骤如下: 1. 打开快影(需要先通过内测申请),选择 AI 创作。 2. 选择 AI 生成视频。 3. 选择图生视频。 4. 上传处理好的图片,填写想要的互动动作和效果,然后点击生成视频。 5. 排队等待生成结束,点击下载。 以上工具均适合于不同的使用场景和需求,您可以根据自己的具体情况进行选择。
2025-01-21
怎么用ai完成淘宝模特图片的批量修改,风格都是一致的
以下是使用 AI 完成淘宝模特图片批量修改且风格一致的方法: 1. 利用 Stable Diffusion 进行局部重绘: 真人穿衣服拍照,获取真实质感的照片。若身材方面有问题,可借助美图秀秀或 PS 处理。 选好真人照片风格的底模,如 majicmixRealistic_v7。 根据不同平台需求换头,如面向海外市场换白女头。 在图生图下的局部重绘选项卡下涂抹自己替换的部分,并设置好 prompts 和 parameters。 2. 大淘宝设计部的实践: 对于定制化真人模特实景素材的主题活动,通过 AI 可将策划、搭建、拍摄、设计融为一个闭环流程,短时间内完成页面所有素材的生产和输出。 在 UI 设计场景中,采用 AI 能力可快速定制多种视觉效果,通过 SD 中 controlnet 的有效控制,生成指定范围内的 ICON、界面皮肤等内容。 通过对 AI 大模型的训练和应用,算法从模特姿态、背景风格、装饰元素等多个维度进行效果升级,结合用户数据提供定制化的线上真人化模特体验。 一张商品图,结合用户的自定义输入,可生成多张场景效果,无需 3D 模型、显卡渲染和线下拍摄。 此外,字节发布的新模型 SeedEdit 也可用于图片编辑,每次编辑尽量使用单指令,多指令最好少于 3 种变化。为保证效果,局部编辑时下指令要精准,参考图要清晰、分辨率高。若编辑效果不明显或变化过多,可调整编辑强度。
2025-01-21
图片生成视频
以下是关于图片生成视频的相关内容: 使用 Pika 生成视频 打开 Discord,点击邀请链接加入 Pika 的生成视频频道:https://discord.gg/pika 生成视频的方式: 选择作画频道。 输入“/”+指令,其中: /create 为文字生成视频指令。 /animate 为图片生成视频指令。 /encrypt_image 为图片+文字生成视频指令。 选择 /animate 生成图片视频时,输入想要的图片,不能添加其他文字要求描述;或者在 message 处输入想要的图片,并在 prompt 处添加描述。 Pika 的常用指令参数: gs xx:引导比例,较高的值使其与文本更相关(推荐范围为 8 24)。 neg xxx:负面提示(指定在视频中不希望出现的内容)。 ar xx:xx:宽高比(例如 16:9、9:16、1:1、4:5)。 seed xxx:生成过程中增加一致性的种子数。 motion xx:所需运动强度(仅支持 0/1/2)。 fps xx:视频的帧率。 Pika 介绍及使用指南 要生成视频,需要进入 generate 频道,目前有 10 个 generate 频道,随便选择一个进入即可。 PIKA 生成视频的工作流程: 直接生成视频:在输入 /create,然后输入 prompt,得到视频。 图片生成视频:使用 MJ/SD 生成图像(可选)+在 PIKA 平台添加 prompt = 得到视频。 ComfyUI Flux 与 runway 制作绘画视频 生成图片:提示词告诉 flux,去生成一张技术草图,CAD。 绘制的视频:在 runway 里面,使用提示词,告诉是从空白页面开始,逐行创建;把生成的图片作为尾帧。 草图上色:使用 flux 的 controlNet,depth 固定,controlNet 使用的是 Union 的版本,不建议权重调得太高,结束时间也是。 生成上色后的视频。 how2draw Flux lora:再分享一个好玩的 flux lora,用来展示绘画的过程,触发词:how2draw 。
2025-01-21
推荐几张ai领域图片
以下为您推荐几张 AI 领域的图片: 1. 节目单: 图片主题:风景,祖国河山 描述:AI 还原的中国自然景观,一些前所未有的角度,带来视觉震撼。 图片主题:AI 与画手的对话 描述:展示 AI 作为艺术创作工具,表明 AI 不是只会抄袭,而是画手的好工具。 图片主题:搞笑图/扩图轮播 描述:全网搞笑图片的二创。 图片主题:诗与远方 描述:诗词与 AI 结合的视觉艺术,呈现唯美画面。 图片主题:AI 红包 描述:直播制作红包封面并分发,炒热气氛。 2. 摊位信息: 摊位主题:乐易科学院 描述:通过 AI 技术,结合量子、暗物质、天体运行规律等能量形式,从科学、物理学、天文学、心理学等方面讲解国学和传统文化,可进行批八字、调风水、性格色彩分析。 摊位主题:AIGC 策划程序美术(3AI 简称 3A 游戏)应用独立游戏开发 摊位主题:AI 人像摄影绘画 摊位主题:B2B AI 营销与 AI 落地项目快速落地 描述:涵盖 AI 训练 to b 出应用、智能体 agent、文生图生视频等,以及美国独立站搭建、Google seo 与 AI 结合等,展示相关技术尝试和工具。 3. 他山之石|如何防止 AI 取代人类思考一切: 原文主要探讨了手写笔记和手绘对于学习和思考的重要性,认为在学习新技能时应先依靠人类自身,不应过早使用 AI,还提到了与朋友 Trevor Muir 关于此问题的交流。
2025-01-21
让图片动起来
以下是关于让图片动起来的相关内容: 关于生成式 AI 的内容承载,短期内可能因新鲜感获流量红利,但人们最终在意的仍是高质量内容。我们掌握了各种先进工具,如让老照片动起来等,但关键是如何更好地结合两张照片。 实现让图片中人物动起来及两张照片更好结合的方法: 方法一:利用 MJ 画图得到想要的底图,使用 InsightFaceSwap 插件处理脸部(因对多人脸部同时处理效果不好,需先分割裁剪图片分别处理再缝合),最后用可灵或其他软件让图片动起来。 方法二:在网上寻找能直接融合两张照片的软件或项目,若没有则纯 P 图,然后用图生视频的项目完成。 使用 Camera Motion 让图片动起来的步骤: 上传图片:点击“AddImage”。 输入提示词:在“Prompt”中输入。 设置运镜方向:选择想要的方向,输入运镜值。 设置运动幅度:与画面主体运动幅度有关,可任意设置。 其它:选择好种子、是否高清、是否去除水印。 生成视频:点击“create”。
2025-01-12
你能让图片动起来么?
要让图片动起来,可以通过以下几种方法: 1. 方法一: 利用 MJ 画图绘制想要的底图。 使用 InsightFaceSwap 插件进行换脸或让脸部更像,但因该插件对多人脸部同时处理效果不佳,需先对图片进行分割裁剪,分别处理后再缝合。 最后使用可灵或其他软件让图片动起来。 2. 方法二: 在网上寻找能够融合两张照片的软件或项目,直接对图片进行融合。若没有,则进行纯 P 图处理,然后利用图生视频的项目完成。 此外,还有一些相关的工具和技巧: 工具“清影”:输入一张图片和相应提示词,清影大模型会将图片转变为视频画面。也可以只输入图片,让模型自行发挥想象力生成有故事的视频。 技巧 1:选用清晰的图片,上传图片比例最好为 3:2(横版),支持上传 png 和 jpeg 图像。若原图不够清晰,可使用分辨率提升工具。 技巧 2:提示词要简单清晰。可以选择不写 prompt,让模型自行操控图片动起来;或者明确想动起来的主体,并以“主体+主题运动+背景+背景运动”的方式撰写提示词。 工具“Camera Motion”: 上传图片:点击“AddImage”。 输入提示词:在“Prompt”中输入。 设置运镜方向:选择想要的运镜方向。 设置运动幅度:与画面主体运动幅度有关,与运镜大小无关,可设置任意值。 其他:选择好种子(seed)、是否高清(HD Quality)、是否去除水印(Remove Watermark)。 生成视频:点击“create”。
2025-01-08
让图片能动起来的工具
以下是一些能让图片动起来的工具: 1. 清影:输入一张图片和相应的提示词,清影大模型会将图片转变为视频画面。您也可以只输入图片,模型会自行发挥想象力生成有故事的视频。使用时的小技巧包括:选用尽可能清晰的图片,上传图片比例最好为 3:2(横版),支持上传 png 和 jpeg 图像。如果原图不够清晰,可使用分辨率提升工具。提示词要简单清晰,可以选择不写 prompt 让模型自行操控,也可以明确想动起来的主体,并以“主体+主题运动+背景+背景运动”的方式撰写提示词。若不明确模型如何理解图片,可将照片发送到清言对话框进行识图明确主体描述。 2. VIGGLE: Mix:先上传一个视频和一张角色图像,Viggle 会自动将视频的动态赋予给这个角色,形成新视频,能模拟角色 3D 状态,准确还原身体旋转、四肢交叠等动作,也可以利用现有的模版视频作为动作获取来源。 Multi:通过视频的动作,将上传的多个角色进行识别并赋予动作,形成新视频。 Move:将视频的动作直接映射在图片人物身上,实现“让静态图动起来”。
2024-12-30
让旧照片动起来
以下是一些可以让旧照片动起来的工具和相关信息: Dreamina: 网址:https://dreamina.jianying.com/aitool/home?subTab 优点:不需要🪜,每天有免费额度。 注册:抖音号或手机号。 时间:5min 体验:上传一张离谱村的图片,即使不加提示词也能让图片有一些动态。父母上传风景照片后,有的水面动起来效果不错,有的画面扭曲。还引发了关于肖像权、版权、信息安全及技术意义的探讨。对于能否在扣子里一起用的问题,有插件的情况下应该可以,否则直接去官网更方便快捷。 Sora: 网址:https://openai.com/sora 优点:发布的成果好,集成在 openai 一套里可用。 限制:需要🪜,需要 gmail 注册,需要订阅后才能使用。 时间:30 60min 价格:GPT 4 20$一个月
2024-12-20
我需要一个能把很多照片拼接起来生成photostory的AI软件
以下是为您推荐的一些可能用于将很多照片拼接起来生成 photostory 的 AI 软件: 1. DiT:它不仅能生成高质量的逐帧图像,还能将这些图像串成流畅的视频,避免画面跳动问题。 2. 特看科技的 Topview.ai:这是一款多模态转换工具,作为 AI 驱动的营销视频生成工具,可将输入的提示词或者商品详情页链接等素材,一键转换为爆款商业短视频。 3. MJ:通过设置相机参数、写实风格等,使用 MJ v 6.0 绘图,还可进行图片裁剪和拼接等操作。 4. Pika、Pixverse、Runway、SVD:可用于生成不同类型的视频内容,包括剧情片、科幻片、战争片、奇幻片等。 您可以根据自己的需求和使用习惯选择适合您的软件。
2024-12-05
AI是什么时候发展起来的
AI(人工智能)的发展最早可以追溯到上世纪。1943 年,心理学家麦卡洛克和数学家皮特斯提出了机器的神经元模型,为后续的神经网络奠定了基础。1945 年,Alan Turing 就考虑用计算机来模拟人脑,设计了 ACE 来模拟大脑工作。1950 年,图灵最早提出了图灵测试,作为判别机器是否具备智能的标准。1956 年,在美国达特茅斯学院,马文·明斯基和约翰·麦凯西等人共同发起召开了著名的达特茅斯会议,“人工智能”一词被正式提出,并作为一门学科被确立下来。此后近 70 年,AI 的发展起起落落。1994 年,一组 52 名心理学家签署了有关智能科学的广泛定义的社论。2000 年代初,“通用人工智能”(AGI)一词流行起来。2022 年 11 月 30 日,OpenAI 发布基于 GPT 3.5 的 ChatGPT,引发了全球的 AI 浪潮。
2024-11-04