直达「 通往AGI之路 」飞书知识库 →
首页/问答列表/问答详情

视频局部重绘

回答

以下是关于视频局部重绘的相关信息:

  • Haiper 工具:
    • 能进行视频重绘,包括轻松修改颜色、纹理和元素以改变原视频的视觉内容。
    • 局部重绘可通过点选方式选中需重绘区域,再输入替换内容提示词,但大量背景重绘效果一般,视频易崩。
    • 文生视频支持选择风格、秒数(2s 和 4s)、种子值等。
    • 网址:https://haiper.ai/
    • 文生视频不同风格展示可参考:AI 视频提示词库
    • 图生视频只能写提示词、秒数(2s 和 4s)、种子值。
  • 【SD】工具:
    • 原理是将蒙住的部分重新画,也可将未蒙住的部分重新画,比如蒙住人物重画其背景。
    • 更进阶的用法是进入涂鸦重绘,用颜色画笔画任意想添加的东西,如在头顶加小黄花。
    • 可添加关键词生成相应内容。
    • 如需扩展背景,可在图生图中选择“缩放后填充空白”,重绘幅度 0.5,并增加宽度。
    • 随着重绘幅度增大,人物细节可能改变,若想只改背景不改人物,可借助 PS 制作精确蒙版,进入“上传重绘蒙版”界面,上面放置需重绘的图像,下面放置 PS 中制作好的蒙版。
  • Video Battle AI 视频挑战:
    • 本次大赛主题为首尾帧要求:视频首、尾、首的方式制作。
    • 方法 1 为【MJ 出图+AI 视频软件】,使用 Midjourney 垫图➕描述出图,再去视频工具中转成视频。可下载[素材]项里的深度图,打开 MJ 官网上传深度图。Midjourney 官网:https://www.midjourney.com/ 。局部重绘有难度,最终方式为分开画再合成。
内容由 AI 大模型生成,请仔细甄别(powered by aily)

参考资料

小歪:AI视频工具合集

https://haiper.ai/文生视频、图生视频、素描生视频、扩展视频,能生成HD超高清的视频文生视频支持选择风格、秒数(2s和4s)、种子值文生视频不同风格展示[AI视频提示词库](https://waytoagi.feishu.cn/wiki/FPLTwMwsxiXC0kkfcmncqI2XnDh?table=tblHfIXQT9G4fiNR&view=vewItBc7AK)图生视频只能写提示词、秒数(2s和4s)、种子值视频重绘,轻松修改颜色、纹理和元素以改变原视频的视觉内容。局部重绘是使用点选的方式,选中需要重绘的区域,再输入需要替换的内容提示词,如果是大量背景的重绘,效果一般,视频容易崩。相关界面截图:

【SD】玩转局部重绘,哪里不行点哪里

它的原理就是将蒙住的部分重新画,你也可以将没有蒙住的部分重新画,比如你可以把人物蒙住之后,重画她的背景。更进阶的用法,我们可以进入涂鸦重绘,用颜色画笔画任意你想添加的东西,比如在她的头顶加上一朵小黄花。添加关键词(Yellow flowers:1.2),点击生成,图片就像神笔马良一样生出了一朵花。如果我们想让这张照片变成横的,就需要扩展它的背景,可以在图生图中选择“缩放后填充空白”,重绘幅度0.5,并将宽度从512增加到1200。生成后不仅对背景做了补充,甚至还将人物进行了补全,但是背景拉伸的重复度太高,这时可以适当增加重绘幅度。当重绘幅度为0.58的时候,背景已经比较正常了。但是随着重绘幅度的增大,可以看见人物的细节也产生了一定的改变。有什么办法可以既不改变人物,又能修改背景呢?这里就需要用到一点PS的帮助了,我们保存这张图进入PS,对主体人物抠像。点击选择-主体,可以得到这个人物的选区。对选区填充白色,对背景填充黑色,就可以得到这个人物形象的精确蒙版。我们进入“上传重绘蒙版”的界面,上面放置需要重绘的图像,下面放置PS中制作好的蒙版。

第15期:Video Battle AI 视频挑战-首尾帧

使用Midjourney垫图➕描述出图,再去视频工具中转成视频下载[素材]项里的深度图,打开MJ官网上传深度图Midjourney官网:https://www.midjourney.com/局部重绘有点难度⬇️,放弃最终方式:分开画:先画个被关着的红衣服女孩,再画个二战德国士兵的背影,再合成。p在一起再丢给MJ各种垫图局部重绘也能无中生有

其他人在问
识别图片中的形状和文字元素并在PPT中重绘图像的AI工具
以下为您推荐一些能够识别图片中的形状和文字元素并在 PPT 中重绘图像的 AI 工具: 1. Gamma:这是一个在线 PPT 制作网站,允许用户通过输入文本和想法提示快速生成幻灯片。它支持嵌入多媒体格式,如 GIF 和视频,以增强演示文稿的吸引力。网址:https://gamma.app/ 2. 美图 AI PPT:由知名图像编辑软件“美图秀秀”的开发团队推出。用户通过输入简单的文本描述来生成专业的 PPT 设计,包含丰富的模板库和设计元素,可根据需求选择不同风格和主题的模板,适用于多种场合。网址:https://www.xdesign.com/ppt/ 3. Mindshow:一款 AI 驱动的 PPT 辅助工具,提供一系列智能设计功能,如自动布局、图像选择和文本优化等,简化设计流程,还可能包括互动元素和动画效果。网址:https://www.mindshow.fun/ 另外,如果您想从游戏截图升级到 KV 品质,正式绘画目前有图生图和 controlnet 两种出图方式。但如果底图质量不够,想要 AI 更自由发挥,除了调高重绘幅度,还可以在 controlnet 上有更多探索。输入正负 TAG,设置好图片尺寸、迭代步数、采样器、重绘幅度后,等待图片生成。controlnet 包含的功能很多且在不断更新,如需更多了解可跳转 B 站深度学习:https://www.bilibili.com/video/BV1Ds4y1e7ZB/?spm_id_from=333.337.searchcard.all.click
2024-08-29
我做了一个视频,背景是实拍的城市照片,角色是一个卡通角色,通过即梦让照片上的卡通角色动起来后,发现卡通角色的脸跟手臂动作都糊了。 我现在有什么办法优化,对卡通角色五官重绘更清晰的情况下,还保留现实的照片背景。(用sd重绘的话是不是就丢失了)
以下是一些可能有助于您优化视频的建议: 1. 对于您提到的卡通角色动作模糊的问题,可以尝试使用 Dreamina 工具,并将运动速度设为慢速,同时在 Prompt 里写轻微的动作描述,可能会有不错的效果。 2. 由于 Dreamina 工具存在只有 8 帧和 720P 的限制,您可以使用 Topaz Video AI 将其增强到 24 帧和 4K。在 B 站搜索“Topaz Video AI 4.2.1”关键词能找到相关教程。增强完成后,再放到剪映里裁成 21:9 的比例。 3. 对于卡通角色五官不清晰的情况,如果 AI 工具无法处理,可能需要使用传统的 AE 软件自己制作,比如普通的下沉位移动画。 需要注意的是,在某些情况下,如人物在水中下沉时,AI 视频可能会出现脸糊的情况,这种情况可能需要传统手段来解决。
2024-08-25
我创作了一个AI视频,背景是实拍的城市照片,角色是一个卡通角色,通过即梦让照片上的卡通角色动起来后,发现卡通角色的脸跟手臂动作糊了,我期望通过comfy对其重绘,能解决保留现实背景,卡通角色五官重绘更清晰吗?
在处理您提到的这种情况时,有以下一些建议和方法: 1. Dreamina 对 Prompt 的语义理解较好,您可以将运动速度设为慢速,并在 Prompt 里写轻微的相关描述,可能会有不错的效果。但需要注意的是,Dreamina 存在只有 8 帧和 720P 的限制,对比 Runway 的 24 帧和 4K 有差距。所以需要使用 Topaz Video AI 去增强到 24 帧和 4K,您可以在 B 站通过“Topaz Video AI 4.2.1”这个关键词搜索教程进行学习。增强完以后,再扔到剪映里裁成 21:9。 2. 对于人物在水中下沉等情况导致的脸糊问题,很多时候 AI 搞不定,可能需要使用传统 AE 自己制作普通的下沉位移动画。 不过,需要说明的是,在一些复杂的场景和动作中,AI 可能仍然存在一定的局限性,需要综合多种工具和方法来达到理想的效果。
2024-08-25
MJ局部重绘
MJ 局部重绘是一种图像处理技术,它允许用户对图像的特定部分进行重新绘制或修改,而不需要改变整个图像。这种技术可以用于各种应用,如修复照片、创建动画、制作游戏等。 MJ 局部重绘的实现方式有很多种,其中一种常见的方式是使用图像处理软件,如 Adobe Photoshop 或 Sketch。这些软件提供了各种工具,如画笔、橡皮擦、填充工具等,用户可以使用这些工具对图像进行局部重绘。 另一种实现方式是使用深度学习技术,如卷积神经网络(CNN)。这些技术可以自动学习图像的特征,并根据用户的输入对图像进行局部重绘。这种方式通常需要大量的训练数据和计算资源,但可以实现更加复杂和自然的局部重绘效果。 总的来说,MJ 局部重绘是一种非常有用的图像处理技术,它可以帮助用户对图像进行局部修改和优化,以满足各种需求。
2024-05-21
我想学习MJ的局部重绘功能
以下是关于 MJ 局部重绘功能的介绍和使用方法: 1. 介绍:MJ 局部重绘功能可以选择一个区域并重新绘制这部分的内容。 2. 使用方法: 打开图片后,点击“编辑器”,选择需要重绘的区域。 若输入/settings 并启用“remix mode”,在编辑器中还将获得一个文本框,以便为该区域更改/修改提示。 更多详细的介绍可以参考《》这篇文章。
2024-05-02
国内外好用的图生视频模型
以下是一些国内外好用的图生视频模型: 可灵(国内,免费) 网址:https://klingai.kuaishou.com/ 支持文生视频、图生视频。 支持图生视频首尾帧功能。 提示词可使用中文。 文生视频支持正向提示词、反向提示词、运镜控制、时长选择(5s、10s),支持 16:9、9:16、1:1 尺寸。 图生视频除了不可运镜控制以外,其他跟文生视频基本相同。 默认生成 5s 的视频。 ETNA(国内) 网址:https://etna.7volcanoes.com/ 由七火山科技开发的文生视频 AI 模型。 可以根据用户简短的文本描述生成相应的视频内容。 生成的视频长度在 8 15 秒,画质可达到 4K,最高 38402160,画面细腻逼真,帧率 60fps。 文生视频,支持中文,时空理解。 关于可灵的文生视频效果,测试者 Austin 周安鑫进行了以下测试: 1. 场景识别:包括室内和室外,如客厅的沙发、液晶电视、漂亮的波斯猫、超现实主义的蜿蜒河流、茂密森林、灿烂花海、碧绿草坪等。 2. 物体识别:涵盖静态和动态物体,如水晶球、跳动的火焰、翱翔的飞鸟、闪烁的流星、飞溅的水珠等。 3. 人物识别:包括面部和姿态,如一个人笑容灿烂、一个人惊恐愤怒,一位芭蕾舞女孩在冰面上跳舞等。 4. 动作识别:包含基本和复杂动作,如短跑运动员快速奔跑、赛车手驾驶跑车激烈漂移等。 5. 事件检测:有简单和复杂事件,如一位帅哥在喝水、外星文明和地球进行星际大战等。 6. 环境变化:涉及光线和天气,如奇幻的极光舞动变幻、城市写字楼灯光忽明忽暗、闪电交加、乌云密布、台风、大雨等。 7. 多对象场景:包括单一和多对象场景,如 1 个飞行员驾驶战斗机翱翔太空、海军指挥航母战斗群展开激烈战斗等。 8. 特殊场景:有遮挡和非标准场景,如城市大雾遮挡摩天大楼、一边是神秘海底世界,一边是梦幻糖果屋。 9. 细节检测:包含小物体和微表情,如崭新的苹果电脑屏幕上播放电影、瞳孔收缩、脸颊泛红、嘴唇微微颤抖。
2024-09-19
我想了解 AI 创作视频相关的资料
以下是关于 AI 创作视频的相关资料: 在人员方面,有以下人员从事与 AI 创作相关的工作: 路西:从事 AI 视频创作。 汪汪汪:制作 AI 视频、AI 图文。 大白光:在生活和工作中出图和视频。 kone:从事 AI 商业实战应用,包括 AI 短片、AI 广告、AI 电影、AI MV 等。 一花一世界:从事视频相关工作。 林旭辉:从事视频制作、电商相关工作。 如果想用 AI 把小说做成视频,一般的制作流程如下: 1. 小说内容分析:使用 AI 工具(如 ChatGPT)分析小说内容,提取关键场景、角色和情节。 2. 生成角色与场景描述:根据小说内容,使用工具(如 Stable Diffusion 或 Midjourney)生成角色和场景的视觉描述。 3. 图像生成:使用 AI 图像生成工具根据描述创建角色和场景的图像。 4. 视频脚本制作:将提取的关键点和生成的图像组合成视频脚本。 5. 音频制作:利用 AI 配音工具(如 Adobe Firefly)将小说文本转换为语音,添加背景音乐和音效。 6. 视频编辑与合成:使用视频编辑软件(如 Clipfly 或 VEED.IO)将图像、音频和文字合成为视频。 7. 后期处理:对生成的视频进行剪辑、添加特效和转场,以提高视频质量。 8. 审阅与调整:观看生成的视频,根据需要进行调整,比如重新编辑某些场景或调整音频。 9. 输出与分享:完成所有编辑后,输出最终视频,并在所需平台上分享。 请注意,具体的操作步骤和所需工具可能会根据项目的具体需求和个人偏好有所不同。此外,AI 工具的可用性和功能也可能会随时间而变化,建议直接访问上述提供的工具网址获取最新信息和使用指南。 如果您想参加 filMarathon 全球 AI 电影马拉松大赛,以下是一些学习资料和参赛方式: 剧本创作:人力为主,可参考 图片生成:AI 作图绘画,可参考 视频生成:AI 视频生成,可参考 音频生成: AI 音乐创作,可参考 音效创作指导,可参考 语音合成,可参考 剪辑工具:剪映剪辑,可参考
2024-09-19
AI怎么把图片做成视频
以下是将图片制作成视频的几种方法: 1. 使用 PixVerse 网站(https://app.pixverse.ai):涂抹选区,给出相应的运动方向,最后加入配音,剪辑一下即可。 2. 利用快影(需先通过内测申请): 打开快影,选择 AI 创作。 选择 AI 生成视频。 选择图生视频。 上传处理好的图片,填写想要的互动动作和效果,然后点击生成视频,排队等待生成结束后点击下载。 3. 采用 Midjourney 出图结合 AI 视频软件的方法: 使用 Midjourney 垫图加描述出图。 下载“素材”项里的深度图,打开 MJ 官网(https://www.midjourney.com/)上传深度图。 若图片完美可直接生成视频,若有黑边则需下载图片并用 PS 创成式充填处理黑边。
2024-09-19
推荐将线上视频转变成文字的运用
以下是一些将线上视频转换成文字的应用推荐: 1. Pika:是一款出色的文本生成视频 AI 工具,擅长动画制作,并支持视频编辑。 2. SVD:如果熟悉 Stable Diffusion,可以安装这款最新的插件,能在图片基础上直接生成视频,它是由 Stability AI 开源的 video model。 3. Runway:老牌 AI 视频生成工具,提供实时涂抹修改视频的功能,但需注意是收费的。 4. Kaiber:视频转视频 AI,能够将原视频转换成各种风格的视频。 5. Sora:由 OpenAI 开发,可以生成长达 1 分钟以上的视频。 更多的相关网站可以查看: 另外,为您推荐在线 TTS 工具 Voicemaker(https://voicemaker.in/),它可将文本转换为各种区域语言的语音,并允许创建自定义语音模型,易于使用,适合为视频制作画外音或帮助视障人士。 以上内容由 AI 大模型生成,请仔细甄别。
2024-09-19
有什么工具可以将视频生成脚本
以下是一些可以将视频生成脚本的工具和方法: 1. 工具组合: ChatGPT(https://chat.openai.com/)+剪映(https://www.capcut.cn/):ChatGPT 生成视频小说脚本,剪映根据脚本自动分析出视频所需场景、角色、镜头等要素,并生成对应素材和文本框架,可快速实现从文字到画面的转化,节省时间和精力。 PixVerse AI(https://pixverse.ai/):在线 AI 视频生成工具,支持将多模态输入(如图像、文本、音频)转化为视频。 Pictory(https://pictory.ai/):AI 视频生成器,用户提供文本描述即可帮助生成相应视频内容,无需视频编辑或设计经验。 VEED.IO(https://www.veed.io/):提供 AI 图像生成器和 AI 脚本生成器,帮助从图像制作视频,并规划内容。 Runway(https://runwayml.com/):AI 视频创作工具,能将文本转化为风格化的视频内容,适用于多种场景。 2. 将小说做成视频的制作流程: 小说内容分析:使用 AI 工具(如 ChatGPT)提取关键场景、角色和情节。 生成角色与场景描述:根据小说内容,使用工具(如 Stable Diffusion 或 Midjourney)生成视觉描述。 图像生成:使用 AI 图像生成工具创建角色和场景的图像。 视频脚本制作:将提取的关键点和生成的图像组合成视频脚本。 音频制作:利用 AI 配音工具(如 Adobe Firefly)将小说文本转换为语音,添加背景音乐和音效。 视频编辑与合成:使用视频编辑软件(如 Clipfly 或 VEED.IO)将图像、音频和文字合成为视频。 后期处理:对生成的视频进行剪辑、添加特效和转场,提高视频质量。 审阅与调整:观看生成的视频,根据需要调整,如重新编辑某些场景或调整音频。 输出与分享:完成编辑后,输出最终视频并在所需平台分享。 请注意,具体操作步骤和所需工具可能因项目需求和个人偏好不同而有所差异。此外,AI 工具的可用性和功能可能会随时间变化,建议直接访问工具网址获取最新信息和使用指南。
2024-09-19
有没有把公众号文章转成视频的工具呀
以下是一些可以将公众号文章转成视频的工具: :一个使用人工智能将博客文章转化为播客的工具。用户只需将博客文章复制粘贴到该工具中,几分钟内就能生成一个有声播客。该工具还提供了免费试用和多个价格层级选择。用户无需具备技术知识,可以轻松地将播客发布到 Spotify 等平台,吸引更多的听众。 如果您想用 AI 把小说做成视频,以下是一些相关工具及网址: Stable Diffusion(SD):一种 AI 图像生成模型,可以基于文本描述生成图像。网址: Midjourney(MJ):另一个 AI 图像生成工具,适用于创建小说中的场景和角色图像。网址: Adobe Firefly:Adobe 的 AI 创意工具,可以生成图像和设计模板。网址: Pika AI:文本生成视频的 AI 工具,适合动画制作。网址: Clipfly:一站式 AI 视频生成和剪辑平台。网址: VEED.IO:在线视频编辑工具,具有 AI 视频生成器功能。网址: 极虎漫剪:结合 Stable Diffusion 技术的小说推文视频创作提效工具。网址: 故事 AI 绘图:小说转视频的 AI 工具。网址: 以下是一些文字生成视频的 AI 产品: Pika:一款非常出色的文本生成视频 AI 工具,擅长动画制作,并支持视频编辑。 SVD:如果熟悉 Stable Diffusion,可以直接安装这款最新的插件,在图片基础上直接生成视频。这是由 Stability AI 开源的 video model。 Runway:一款老牌 AI 视频生成工具,提供实时涂抹修改视频的功能,不过需要注意的是,Runway 是收费的。 Kaiber:一款视频转视频 AI,能够将原视频转换成各种风格的视频。 Sora:由 OpenAI 开发,可以生成长达 1 分钟以上的视频。 更多的文生视频的网站可以查看这里: 内容由 AI 大模型生成,请仔细甄别。
2024-09-18
AI画图,局部修改
以下是关于 AI 画图局部修改的相关内容: 在 Stable Diffusion 中,局部重绘功能具有很大的实用性和可操作性。 每次绘图生成都会重新调整整个画面,但局部重绘可以只改变涂抹的部分。例如,将人物头部涂抹掉,修改文字提示为“一个粉色头发的女孩的脸”并点击生成,就可以换掉头部。使用局部重绘(手涂蒙版)修改帽子部分,增加提示词“猫耳”再点击生成。还可以将图片再次放入以图生图中,通过 DeepBooru 反推关键词,并使用新的大模型和 LORA 进行重新生成,改变图片风格。不过,目前的图可能存在细节瑕疵,需要不断调整参数,后期借助 PS 修补。 在 Tusiart 中,文生图的操作流程包括:定主题,确定生成图片的主题、风格和表达信息;选择基础模型 Checkpoint,找内容贴近的模型,如麦橘、墨幽的系列模型;选择 lora,寻找内容重叠的 lora 控制图片效果及质量;ControlNet 用于控制图片中特定图像,如人物姿态、生成特定文字等,属于高阶技能;设置 VAE 可无脑选择 840000;Prompt 提示词用英文写需求,用单词和短语组合,无需管语法和长句。 对比 Midjourney 和 Stable Diffusion,Stable Diffusion 在根据意愿调整方面拥有更大自由度和更稳定的可控性。例如,使用“lofi”大模型绘制人物形象,加入特定提示词和负面 Embedding 来优化效果。然后将图发送到图生图,点击“局部重绘”,用画笔涂抹需要调整的部分(蒙版),在正向提示词里添加相应内容增加权重,如,适当增加重绘幅度点击生成,即可完成修改。
2024-08-19
如果让 ai 复刻《千里江山图》的局部细节,该如何写提示词
要让AI复刻《千里江山图》的局部细节,需要提供清晰、具体的指令,以确保AI能够理解并执行任务。以下是一些可能的提示词和步骤: 1. 明确任务:首先,明确告诉AI你想要复刻的是《千里江山图》的哪个部分,例如:“请复刻《千里江山图》中的山水细节。” 2. 详细描述:提供该局部细节的具体描述,包括颜色、纹理、风格等特征,例如:“重点复刻山峦的层次、水波的流动感以及树木的形态。” 3. 风格指定:如果需要保持原作的风格,可以指定:“请保持宋代山水画的细腻笔触和深远意境。” 4. 技术要求:如果需要特定的技术或效果,例如:“使用高精度的图像处理技术,确保细节的清晰度和真实感。” 5. 尺寸和比例:指定复刻作品的尺寸和比例,例如:“复刻尺寸为原图的一半,保持原有比例。” 6. 材料和工具:如果AI复刻作品需要使用特定的材料或工具,可以指定:“使用数字绘图板和高级绘画软件。” 7. 质量标准:设定作品的质量标准,例如:“确保复刻作品的色彩和细节与原画高度一致。” 8. 反馈和修正:如果AI可以进行交互,可以要求:“在复刻过程中,根据我的反馈进行必要的修正。” 9. 版权和法律:提醒AI注意版权和法律问题,例如:“在复刻过程中,请确保遵守相关的版权法规。” 10. 最终目标:明确复刻作品的最终目标,例如:“复刻的目的是为了艺术教育和展览,需要具有高度的艺术价值。” 结合以上提示,一个完整的提示词示例可能是: “请复刻《千里江山图》中山水细节部分,重点体现山峦层次、水波流动和树木形态,保持宋代山水画的细腻笔触和深远意境。使用高精度图像处理技术,确保细节清晰度和真实感。复刻尺寸为原图的一半,保持原有比例。使用数字绘图板和高级绘画软件,确保色彩和细节与原画高度一致。在复刻过程中,根据我的反馈进行修正,并确保遵守版权法规。复刻作品用于艺术教育和展览,需要具有高度的艺术价值。” 请注意,AI的复刻能力取决于其训练数据和算法的复杂性,可能无法完全达到人类艺术家的水平。
2024-06-04