Navigate to WaytoAGI Wiki →
Home/Question List/Question Detail

图片转视频

Answer

以下是关于图片转视频的相关内容：

一、用 AI 做 3d 新年表情包

  1. 生成场景
    • 可直接生成 1:1 的新年场景，或先将角色抠出合成绿幕，再生成无人物的场景图，方便后期控制。
    • 背景是重要元素，输入“新年、中国新年、喜庆热闹、恭喜发财”等关键词获得合适背景。
    • 在即梦图片生成界面中，选项为智能参考，导入参考图，模型选择图片 2.0 Pro，输入提示词生成图片后选择高清放大。
    • 提示词示例：“戴着醒狮帽，双手抱拳，红色背景，新年喜庆。背景中有金粉，碎花，3d 爆竹显得热闹而喜庆”“拿着‘福’字，新年气氛，红色背景，新年喜庆。背景中有金粉，碎花，3d 爆竹显得热闹而喜庆”
  2. 图转视频
    • 使用可灵 AI 1.6 图生视频工具，抽卡性价比不错，简单效果一般抽两三次即可。
    • 提示词：可爱的拟人小鹿拿着红包对你说谢谢老板，非常开心忍不住跳舞，背后下着红包雨

二、Joey 的创作思路分享

  1. 让想象来到现实
    • 制定分镜，定画面风格和人物是相对难的环节，需与团队达成共识。
    • 定下风格和人物后进行常规的 AI 出图。
  2. 动画与代码共舞
    • 图片转视频主要用到了 runway 的笔刷，即梦的前后帧，Pixverse、pika 等。
    • 介绍了三个转场画面：
      • 360 人物环绕：先用 MJ 做不同角度的人物站立图，通过 comfyui 的首尾帧进行视频制作。
      • 母亲的影子：在 SDXL 工作流中加入两个 controlnet，先在 base 里控制构图，再在 refiner 里控制母亲在画面中的强度。
      • 上帝之手：先出一张伸手的图，用 runway 跑相互接近，转视频序列帧后在 comfyui 里用 controlnet 控制构图，按顺序自动出图跑一晚上，最后剪辑序列帧。

三、离谱村的共创故事

  1. 出图
    • 图片用 Midjourney 生产，AI 离谱村黄社长业务水平高且高产，其他小伙伴辅助。
  2. 图转视频
    • 每张图片转视频进行了大量尝试，各种工具如 pika，runway，Pixverse 轮番上场。
    • 中间找 ZHO 做技术指导，用 SVD1.1 做出精美的视频，甚至上了 stablevideo.com 的首页官方推荐。
  3. 配音部分
    • 配音用 Audiobox 捏出来，每个人物角色有专属声音，用 GPT-sovits 对离谱熊的声音做专属训练。
Content generated by AI large model, please carefully verify (powered by aily)

References

🎉 手把手教你用AI做3d新年表情包：ai小鹿给您拜年啦！ 🎉

在这步我们可以直接生成1:1的新年场景，也可以先将角色抠出合成绿幕，再生成没有人物的场景图，方便后期更精细地控制。背景是表情包的一个重要元素，尤其是新年版的表情包，要表现出浓厚的节日气氛。可以创建一个符合新年主题的场景。输入关键词“新年、中国新年、喜庆热闹、恭喜发财”之类的词汇，得到合适的新年背景。在即梦图片生成界面中考选项为智能参考，导入参考图参，模型选择-图片2.0 Pro。输入提示词，生成图片以后选择合适的图，然后选择高清放大提示词示例1：戴着醒狮帽，双手抱拳，红色背景，新年喜庆。背景中有金粉，碎花，3d爆竹显得热闹而喜庆提示词示例2：拿着"福"字，新年气氛，红色背景，新年喜庆。背景中有金粉，碎花，3d爆竹显得热闹而喜庆[heading2]第三步：图转视频[content]现在，我们要让这个场景动起来啦！用可灵AI 1.6图生视频工具，抽卡性价比不错，简单效果一般抽两三次即可。提示词：可爱的拟人小鹿拿着红包对你说谢谢老板，非常开心忍不住跳舞，背后下着红包雨

Joey: 上影全球AI电影马拉松/最佳叙事奖—种子创作思路分享

有了故事主线和分镜，，接下来制定分镜也相对容易。我习惯直接将故事以分镜的形式写出来。分镜的画面主要按我的感觉来写，所以分镜的制作相对较快。定画面风格和人物是整个创作中相对难的一个环节，我自己知道我想要什么，但是对于共创团队来说，我得有一个参照物来和大家达成共识。这里非常感谢我的小伙伴们，帮我找参考艺术家，帮我一起制定了整个片子的内容核心。定下了风格和人物，接下来就是常规的AI出图。[heading1]三、动画与代码共舞[content]图片转视频主要用到了其实整个视频还是比较顺利的。主要用到runway的笔刷，即梦的前后帧，Pixverse、pika等，画面都不难出，难出的就再抽他个一百次就行。主要说三个本次用到的转场画面。[heading2]1.360人物环绕[content]在主角的梦境破碎，从年轻变老的这一段，我尝试了很多方式去表达，最后决定人物环绕拍摄的方式去做。而技术的思路是先用MJ做一组不同角度的人物站立图，然后通过comfyui的首尾帧进行视频制作。（感谢竹知大佬整理的工作流）[heading2]2.母亲的影子[content]我当时的想法是这组图既能在播放时看到母亲的轮廓，又能在暂停时自己成为一张完整的图片。我参考节气图的思路，在SDXL工作流中加入了两个controlnet，先在base里控制构图，再在refiner里再控制母亲在画面中的强度。[heading2]3.上帝之手[content]这个其实最简单，我们先出了一张伸手的图，然后用runway跑相互接近，然后转视频序列帧后在comfyui里用controlnet控制构图，按顺序自动出图跑一晚上，最后再剪辑序列帧就好了。

离谱村的共创故事

图片是用Midjourney生产，AI离谱村黄社长的业务水平很高，也很高产，其他小伙伴打辅助欢迎关注小红书：AI离谱社，寻找更多离谱灵感[heading2]图生视频[content]每张图片转视频都进行了大量的尝试。各种工具轮番上场pika，runway，Pixverse经常会抽到离谱的又符合离谱村的卡[_seed4262149903300367.mp4](https://bytedance.feishu.cn/space/api/box/stream/download/all/ExUzbkev8oo8UTxoMoFcpQaNnZb?allow_redirect=1)中间还找了ZHO来做技术指导，他帮忙用SVD1.1出来几个精美的视频，甚至还上了stablevideo.com的首页官方推荐。今天已经公测了，大家打开首页就可以看到这个视频[19_1707280129(原视频).mp4](https://bytedance.feishu.cn/space/api/box/stream/download/all/O5aKbZ6PEof6tUx0ZaqcSXX0ncc?allow_redirect=1)[heading2]配音部分[content]其中的配音都是用Audiobox捏出来的，每个人物角色都有自己的专属声音。会把捏好的声音管理起来，大家一起选最合适的那个作为正式配音。为了离谱熊声线的一致性，用了GPT-sovits对离谱熊的声音做了专属的训练。

Others are asking
怎么制作科普视频
制作科普视频可以参考以下步骤和方法： 一、想出点子 1. 最佳免费选项： 2. 付费选项：4.0，但由于与互联网连接，必应可能更好 3. 尽管（或者事实上，由于）它所有的限制和怪异，人工智能是产生想法的完美选择。您通常需要有很多想法才能有好的想法，而人工智能擅长数量。有了正确的提示，您也可以强迫它非常有创意。在创意模式下让 Bing 查找您最喜欢的、不寻常的想法生成技术，如 Brian Eno 的倾斜策略或 Mashall McLuhan 的四种策略，并应用它们。或者要求一些奇怪的东西，比如受随机专利启发的想法，或者您最喜欢的超级英雄。 二、制作视频 1. 最佳动画工具：用于在视频中为人脸制作动画的 2. 最佳语音克隆： 3. 现在，生成一个完全由人工智能生成的角色的视频，阅读完全由人工智能编写的脚本，用人工智能制作的声音说话，由人工智能制作动画，这简直是微不足道的。但要注意深度伪造是一个巨大的问题，这些系统需要合乎道德地使用。 4. 最近还发布了第一个商用文本到视频工具 Runway v2。它创建了 4 秒的短剪辑，更像是对未来发展的展示，但如果您想了解这个领域的未来发展，值得一看。 三、创作科普内容 1. 该场景对应的关键词库（13 个）：目标用户、科普内容、生活问题、医疗类型、科普文章、病情症状、通俗性、专业名词、背景资质、权威领域、执业范围、证言人、内容形式。 2. 提问模板（3 个）： 第一步，分析不同目标用户对于科普内容的需求（具体解决生活中的什么问题） 第二步，针对某一类人群所偏好的科普内容主题，进行内容撰写。 第三步，根据平台和内容形式进行改写。 四、用 AI 把小说做成视频 1. 小说内容分析：使用 AI 工具（如 ChatGPT）分析小说内容，提取关键场景、角色和情节。 2. 生成角色与场景描述：根据小说内容，使用工具（如 Stable Diffusion 或 Midjourney）生成角色和场景的视觉描述。 3. 图像生成：使用 AI 图像生成工具根据描述创建角色和场景的图像。 4. 视频脚本制作：将提取的关键点和生成的图像组合成视频脚本。 5. 音频制作：利用 AI 配音工具（如 Adobe Firefly）将小说文本转换为语音，添加背景音乐和音效。 6. 视频编辑与合成：使用视频编辑软件（如 Clipfly 或 VEED.IO）将图像、音频和文字合成为视频。 7. 后期处理：对生成的视频进行剪辑、添加特效和转场，以提高视频质量。 8. 审阅与调整：观看生成的视频，根据需要进行调整，比如重新编辑某些场景或调整音频。 9. 输出与分享：完成所有编辑后，输出最终视频，并在所需平台上分享。 请注意，具体的操作步骤和所需工具可能会根据项目的具体需求和个人偏好有所不同。此外，AI 工具的可用性和功能也可能会随时间而变化，建议直接访问上述提供的工具网址获取最新信息和使用指南。
2025-02-18
生成视频不受提示词控制怎么办
如果生成视频不受提示词控制，可以考虑以下方法： 1. 向提示添加其他描述符，以便更好地控制生成的视频内容，例如： 电影摄影术语，如浅景深、胶片拍摄和电影。 构图术语，如广角、特写、从上方拍摄和从下方拍摄。 照明术语，如背光、柔光和硬光等。 颜色分级术语，如饱和色、高对比度以及暖色调或冷色调。 情绪或语气术语，如 somber、tense、euphoric 和 mysterious。 摄像机移动术语，如向右或向左平移、向上或向下倾斜以及推拉或向外移动。 2. 对于海螺 AI： MiniMax 视频模型不仅可以准确识别用户上传的图片，并确保所生成视频在形象保持上与原输入图像高度一致，且光影、色调完美嵌入新场景的设定，为创作者提供连贯、深度创作的空间。 在指令响应方面，还能理解超出图片内容之外的文本，解构指令框架和深层语义并在视频生成中整合，实现“所写即所见”。 只依靠模型综合能力，就能实现最顶级的影视特效。 人物表情控制力强，5 秒钟内实现从开怀大笑到掩面哭泣，让视频表达更能深入人心。 近期，海螺 AI 视频同步上线了提示词优化功能，即使在大家对特定的构图、氛围、动作或运镜没有特殊指定要求时，建议开启此功能，聪明的海螺 AI 会结合原始 Prompt 扩展视频的美学呈现。同时，对于更专业的创作者，开放 2000 字的提示词空间，让创作更加精准。 3. 使用 Camera Motion 时： 点击“AddImage”上传图片。 在“Prompt”中输入提示词。 选择您想要的运镜方向，输入。 运动幅度和画面主体运动幅度有关，与运镜大小无关，可以设置成您想要的任意值。 选择好种子（seed），是否高清（HD Quality），是否去除水印（Remove Watermark）。 点击“create”，生成视频。
2025-02-18
图片转视频的国产AI推荐
以下是为您推荐的国产图片转视频的 AI 工具： 1. 可灵：由快手团队开发，生成的图像和视频质量高。在视频生成方面，其视频生成质量卓越，画面清晰、连贯且内容丰富，生成速度快，对于国内用户可访问性强。但价格相对较高，重度用户年费可能达几千元，轻度用户有免费点数和较便宜的包月选项。 2. 通义万相：作为国产 AI 工具，在中文理解和处理方面表现出色，可选择多种艺术和图像风格，操作界面简洁直观，用户友好度高，且目前免费，每天签到获取灵感值即可。但为符合国内监管要求，某些类型图像无法生成，处理非中文语言或国际化内容可能不够出色，处理多元文化内容时可能存在偏差。 更多相关网站可以查看： 内容由 AI 大模型生成，请仔细甄别。
2025-02-18
图片转视频的AI推荐
以下是为您推荐的图片转视频的 AI 工具： 1. Pika：出色的文本生成视频 AI 工具，擅长动画制作，并支持视频编辑。 2. SVD：如果熟悉 Stable Diffusion，可以安装这款最新的插件，在图片基础上直接生成视频，它是由 Stability AI 开源的 video model。 3. Runway：老牌 AI 视频生成工具，提供实时涂抹修改视频的功能，但需要收费。 4. Kaiber：视频转视频 AI，能够将原视频转换成各种风格的视频。 5. Sora：由 OpenAI 开发，可以生成长达 1 分钟以上的视频。 更多的相关网站可以查看：https://www.waytoagi.com/category/38 。 另外，在视频转绘制作视频过程中，Topaz Video AI 是一个不错的插件，用于消除视频抖动和运动模糊。其使用方法如下： 解压对应文件，推荐使用绿色版，右键管理员运行 VideoAIportable.exe 文件，导入处理好的视频。主界面左边是原视频，右边是待处理视频，下面是对应的视频轨道。右边部分是主要对视频处理的方式，预设部分主要是放大视频、提升画质、提升帧率等。稳定 AI 模式分为自动裁切和完整帧，做转绘选择完整帧，强度在 60 左右，抖动需要开启，次数一般选择 2 保持默认不变。 在制作新年表情包时，生成新年场景可以输入关键词“新年、中国新年、喜庆热闹、恭喜发财”之类的词汇得到合适的新年背景。然后使用可灵 AI 1.6 图生视频工具让场景动起来，抽卡性价比不错，简单效果一般抽两三次即可。
2025-02-18
视频转文稿
以下是关于视频转文稿的相关内容： Twitter Space 音频转文稿：使用 Gemini 1.5 Pro 将音频转为按发言人生成的文本，将初稿发送给 Claude 完成错别字纠正、去除口癖、整理段落等优化，最终产出阅读友好的 Markdown 格式文稿。相关链接： 对于视频转文稿，乔向阳提到视频有多种元素但也有缺点，如思考停顿、难以预知内容等，此时飞书妙记或语音转文字初稿可帮助快速跳转想看的位置。Whisper 模型识别字幕准确度高，比飞书妙记或讯飞等工具更准确。乔向阳因自身需求将相关技术工程化、产品化，认为技术在进步且这是市场所需。
2025-02-18
ai生成短视频，有没有免费的工具
以下是一些免费生成短视频的工具： 1. Project Odyssey：这是全球最大的生成式 AI 视频竞赛之一，提供超过 30 种工具的免费额度，累计超过 75 万美元。 2. ChatGPT + 剪映：ChatGPT 可以生成视频小说脚本，剪映则可以根据脚本自动分析并生成对应的素材和文本框架。 3. PixVerse AI：在线 AI 视频生成工具，支持将多模态输入转化为视频，且免费无限生成。 4. Pictory：AI 视频生成器，允许用户提供文本描述来生成相应的视频内容。 5. VEED.IO：提供了 AI 图像生成器和 AI 脚本生成器，帮助用户从图像制作视频，并规划内容。 6. 艺映 AI：专注于人工智能视频领域，提供文生视频、图生视频、视频转漫等服务，用户可以根据文本脚本生成视频。 这些工具各有特点，适用于不同的应用场景和需求，能够帮助您快速生成吸引人的视频内容。但请注意，内容由 AI 大模型生成，请仔细甄别。
2025-02-18
图片生图片
以下是关于图片生图片的相关知识： Tusiart 简易上手教程 概念与功能说明： 1. 图生图：上传图片后，SD 会根据您的图片、选择的模型、输入的 prompt 等信息进行重绘。重绘幅度越大，输出的图与输入的图差别越大。 2. 尺寸：图片生成的尺寸大小。尺寸过小，AI 生成内容有限；尺寸过大，AI 可能放飞自我。若要高清图，可设置中等尺寸并用高分辨率修复。 3. 采样算法：即让 AI 用何种算法生图。 4. 采样次数：AI 调整图片内容的次数。次数越多，调整越精密，理论上出图效果越好，但耗时越长。不过并非次数越多越好，效果提升并非线性，过多后效果增长曲线会放平并开始震荡。 5. 提示词相关性：指图像与 prompt 的匹配程度。数字增大将使图像更接近提示，但过高会导致图像质量下降。 6. 随机种子 seed：生成的每张图都有随机种子。固定种子后，可进行“控制变量”操作，如修改提示词等。首次生成图时无种子，无需操作。 7. Clip Skip：可用于生成图片后控制、调整构图变化，一般设为 2，早期无需过多关注。 8. ENSD：eta 噪声种子增量，默认设为 0 即可。 简明操作流程： 在会用文生图之后，上传图片即可尝试图生图。注意重绘幅度，最小可选 0.01 的重绘，输出的图片差别较明显。局部重绘等高阶功能不在本简明操作流程中，后续进阶内容的教程再展开。 Liblibai 简易上手教程 简明操作流程： 在会用文生图之后，上传图片即可尝试图生图。注意重绘幅度，最小可选 0.01 的重绘，输出的图片差别较明显。局部重绘等高阶功能不在本简明操作流程中，后续进阶内容的教程再展开。
2025-02-18
图片提示词反推工具
以下是关于图片提示词反推工具的相关信息： LayerStyle 副本：根据图片反推提示词，可设置替换词。使用 Google Gemini API 作为后端服务，需在申请 API key，并填到插件根目录下的 api_key.ini 文件中（默认名字为 api_key.ini.example，初次使用需将后缀改为.ini，用文本编辑软件打开，在 google_api_key=后面填入 API key 并保存）。节点选项包括：api（目前只有"geminiprovision"一个选项）、token_limit（生成提示词的最大 token 限制）、exclude_word（需要排除的关键词）、replace_with_word（替换 exclude_word 的关键词）。 PromptEmbellish：输入简单的提示词，输出经过润色的提示词，支持输入图片作为参考。使用 Google Gemini API 作为后端服务，同样需申请并填写 API key。节点选项包括：image（可选项，输入图像作为提示词参考）、api（目前只有"googlegemini"一个选项）、token_limit（生成提示词的最大 token 限制）、discribe（在这里输入简单的描述，支持中文）。 【SD】真人转二次元：图生图功能除文本提词框外还有图片框输入口，可通过图片给与 AI 创作灵感。有两个反推提示词的按钮：CLIP 可通过图片反推出完整含义的句子；DeepBooru 可反推出关键词组。但生成的提示词可能有瑕疵，需手动补充信息。调整宽度和高度使红框匹配图片，同时注意提示词相关性和重绘幅度这两个参数。 第二十一期港风胶片： 活动介绍：墨悠大佬的胶片 lora 模型搭配 flux1 dev 大模型，文艺复兴，唯美胶片复古。lora 模型链接：https://www.liblib.art/modelinfo/e16a07d8be544e82b1cd14c37e217119?from=personal_page 教程： 方法 1：利用上一期活动图片反推工作流，使用唯美港风图片进行反推提示词，在大模型后接一个墨悠_胶片 lo。上一期活动链接： 胶片 lora 链接：https://www.liblib.art/modelinfo/e16a07d8be544e82b1cd14c37e217119?from=personal_page 方法 2：利用抱脸的 joycaption 图片反推提示词，然后在哩布上跑 flux 文生图工作流。joycaption 链接（需要魔法）：https://huggingface.co/spaces/fancyfeast/joycaptionprealpha 文生图工作流： 在哩布上跑文生图：https://www.liblib.art/modelinfo/e16a07d8be544e82b1cd14c37e217119?from=personal_page
2025-02-18
图片提示词提取工具
以下是一些图片提示词提取工具： MidLibrary：Midjourney 最全面的流派、艺术技巧和艺术家风格库，网址： MidJourney Prompt Tool：类型多样的 prompt 书写工具，点击按钮就能生成提示词修饰部分，网址： OPS 可视化提示词：这个网站有 Mid Journey 的图片风格、镜头等写好的词典库，方便快速可视化生成自己的绘画提示词，网址： AIart 魔法生成器：中文版的艺术作品 Prompt 生成器，网址： IMI Prompt：支持多种风格和形式的详细的 MJ 关键词生成器，网址： Prompt Hero：好用的 Prompt 搜索，Search prompts for Stable Diffusion,ChatGPT&Midjourney，网址： OpenArt：AI 人工智能图像生成器，网址： img2prompt：根据图片提取 Prompt，网址： MidJourney 提示词工具：专门为 MidJourney 做的提示词工具，界面直观易用，网址： PromptBase：Prompt 交易市场，可以购买、使用、销售各种对话、设计 Prompt 模板，网址： AiTuts Prompt：精心策划的高质量 Midjourney 提示数据库，提供了广泛的不同风格供选择，网址： 关于悠船工具的基础使用教程： 进入官网，可以选择桌面端下载和浏览器使用。为方便选择浏览器使用，第一次使用需注册，选择企业用户注册，输入对应名称和手机号即可注册成功（目前不需要填写企业信息）。注册完成后进入具体操作页面。 基础操作：点击开始想象按钮，将生成的提示词粘贴在下面，回车等待几十秒生成 4 张图片，可选择喜欢的图片进行对应操作。 创作调整： 风格化：数字越大，越艺术，但并非越大越好，取决于创作，人像不用调整过高。 怪异化：数字越大越奇怪，可不碰。 多样化：数字越大，结果越意想不到，越低越接近提示词。建议新手一开始不用怪异和多样化，可做实验测试。 模式：默认标准，朴实 raw 会让图片质感更好，个人喜爱。 版本：默认最高 V6，建议最高，二次元可选 NIJI。 生成图片的速度：默认快速，越快对支付套餐要求越高。 “城市狂想”直接上手操作的教程中关于图片提示词生成： 提供了猫叔写的一段提示词的 prompt 并生成了三条，还为大家直接生成了 1 组共 12 段提示词，可直接使用。注意提示词在悠船和 MJ 中可直接用，在其他平台工具请复制后删除包含“”以后的部分。拿到提示词后可进入喜欢的 AI 绘画工具界面，例如悠船，点击开始想象按钮粘贴提示词。
2025-02-18
有什么可以通过文字生成流程图或其他图片的AI网址
以下是一些可以通过文字生成流程图或其他图片的 AI 网址： DALL·E：由 OpenAI 推出，可根据输入的文本描述生成逼真的图片。 StableDiffusion：开源的文生图工具，能生成高质量图片，支持多种模型和算法。 MidJourney：因高质量的图像生成效果和用户友好的界面设计而受欢迎，在创意设计人群中流行。 您可以在 WaytoAGI 网站（https://www.waytoagi.com/category/104 ）查看更多文生图工具。 此外，还有一些文字生成视频的 AI 产品，如： Pika：擅长动画制作，支持视频编辑。 SVD：Stable Diffusion 的插件，可在图片基础上生成视频。 Runway：老牌 AI 视频生成工具，提供实时涂抹修改视频功能，但收费。 Kaiber：视频转视频 AI，能将原视频转换成各种风格的视频。 Sora：由 OpenAI 开发，可生成长达 1 分钟以上的视频。 更多的文生视频网站可查看：https://www.waytoagi.com/category/38 。 请注意，以上内容由 AI 大模型生成，请仔细甄别。
2025-02-18