直达「 通往AGI之路 」飞书知识库 →
首页/问答列表/问答详情

那个文生视频或图生视频的AI可以生成融合变化的效果

回答

以下是关于文生视频或图生视频的 AI 生成融合变化效果的相关信息：

在人工智能技术迅速发展的当下，AI“词生卡”技术兴起，它将文字描述转化为视觉图像，重塑了创意产业格局。AI 的多模态输出能力已基本成型，包括文生文、文生图、文生码、文生视频、图生视频等，但大多在某个维度能力强，跨界融合还不够。

从生成方式分类，AI 视频生成包含：

  1. 文生视频、图生视频，如 Runway、Pika labs、SD + Deforum、SD + Infinite zoom、SD + AnimateDiff、Warpfusion、Stability Animation 等。

一些热门产品如 Luma AI，其 Dream Machine 目前支持 txt2vid 文生视频和 img2vid 图生视频两种能力，8 月底最新发布的 Dream Machine 1.5 增强了提示词理解能力和视频生成能力。Luma AI 的 img2vid 生成效果在多方面表现出色，如生成时长较长、运动幅度大、能产生相机多角度位移、运动过程一致性保持较好、分辨率高且有效改善模糊感等。

内容由 AI 大模型生成，请仔细甄别（powered by aily）

参考资料

AI“词生卡”的蝴蝶效应：从文字到视觉盛宴跨界蝶变

在人工智能（AI）技术如火如荼发展的今天，一场悄然兴起的内容创作革命正在改变我们与信息交互的方式。AI"词生卡"技术，这个将文字描述魔法般转化为视觉图像的创新工具，正在重塑创意产业的格局。它不仅是AI技术的进步，更是AIGC领域的管用、实用应用在加速拓展、融合以及快速落地。从去年的百模大战、各式各样的聊天机器人，到今年的逻辑链、agent满天飞，渐渐地在大厂和用户之间也慢慢地形成了一个匹配的鸿沟，一个技术太快、用户需求更不上的减速带。问题有回到了最初的那个问题：我们普通人到底能用AI干什么？我们到底要AI干什么？[heading3]快速的需求适配：AI"词生卡"做对了什么？[content]使用Lisp撰写的词卡提示词古早的Lisp语言，再Claude3.5强大的理解力和绘图支持下，焕发了新生，制造了新卡，这不是Lisp语言的胜利，是技术发展的必然产物。而这一波经久不衰的热度，则是踩上了时代的脉搏、当前的主要矛盾—— “人们日益增长的AI创作输出需求，与大厂们四处创新但不够实用之间的矛盾”AI的多模态输出能力已经基本成型，文生文、文生图、文生码、文生视频、图生视频等，但是大多都是“T型”不是“V型”，再某个维度上能力很强，但是想跨界融合，目前融合不够、跨界不多。而这波的“词生卡”的出现，算是国内独立开发者给大厂好好地上了一课，他做到了：信息提纯、跨界融合、文图合一、审美优先、情绪输出、管用好用。

AI视频生成(下) | 20个产品推荐及实践教学

本文作者Bay，写于23.09月底，关注公众号“Bay的设计奥德赛”接受及时推送本篇通过产品介绍和丰富的案例实践，带你了解AI视频有哪些产品，效果如何实现。若从生成方式分类，AI视频生成包含：1.文生视频、图生视频（Runway、Pika labs、SD + Deforum、SD + Infinite zoom、SD + AnimateDiff、Warpfusion、Stability Animation）2.视频生视频：又分逐帧生成（SD + Mov2Mov）、关键帧+补帧（SD + Ebsynth、Rerender A Video）、动态捕捉（Deep motion、Move AI、Wonder Dynamics）、视频修复（Topaz Video AI）3.AI Avatar+语音生成：Synthesia、HeyGen AI、D-ID4.长视频生短视频：Opus Clip5.脚本生成+视频匹配：Invideo AI6.剧情生成：Showrunner AI若从产品阶段和可用维度分类：下面将按照上图维度进行产品介绍。

AI视频爆发式更新- 近半年闭源产品趋势

Dream Machine目前功能很简单，目前仅支持txt2vid文生视频和img2vid图生视频两种能力，除了相机运动，另外支持Extend延长4s、循环动画、首尾帧动画能力。[heading3]txt2vid文生视频[content]8月底最新发布的Dream Machine 1.5增强了提示词理解能力和视频生成能力，令我惊讶的是，Luma对视频内文字的表现也非常强，这是除Runway Gen3、海螺AI以外的产品目前无法实现的效果。[Luma txt2vid.mp4](https://bytedance.feishu.cn/space/api/box/stream/download/all/DACKbCHYIoyQ1OxSAh7cKcywneE?allow_redirect=1)[heading3]img2vid图生视频[content]前阵子我在对各个产品最新模型做测评，感慨于Pika labs效果很好但过于模糊，Runway则总是生成诡异的运动…这些产品的表现仿佛都和宣传片有很大区别。而这正是Luma AI本次更新中最惊艳的一趴，官网公布的视频案例并没有骗人。其img2vid生成效果在多方面远超Pika labs、Runway等产品，是目前可公开体验的AI视频生成领域的王者之一，主要体现在以下方面：生成时长较长（5s），24帧/s，非常丝滑运动幅度更大，能产生相机的多角度位移[Twitter video.mp4](https://bytedance.feishu.cn/space/api/box/stream/download/all/R3Dsb1bGSoKeulx4CPMcNFhPnng?allow_redirect=1)提示词中增加无人机控制的视角变化By:edmondyang运动过程中一致性保持的比较好，有时仿佛图片变成了3D模型分辨率高，且有效改善了运动幅度大带来的模糊感，这点是pika labs一直以来困扰我的问题

其他人在问
怎么用ai制作由人变成动物的视频
以下是使用 AI 制作由人变成动物视频的方法： 一、创建视频内容 1. 准备内容 先准备一段视频中播放的内容文字，可以是产品介绍、课程讲解、游戏攻略等任何您希望推广让大家了解的文字。 您也可以利用 AI 来生成这段文字。 2. 制作视频 使用剪映 App 对视频进行简单处理。电脑端打开剪映 App，点击“开始创作”。 选择顶部工具栏中的“文本”，点击默认文本右下角的“+”号，为视频添加一个文字内容的轨道。 在界面右侧将准备好的文字内容替换默认文本内容。 二、生成数字人 1. 生成数字人 在剪映右侧窗口顶部，打开“数字人”选项，选取一位免费且适合的数字人形象，如“婉婉青春”。 选择数字人形象时，软件会播放其声音，可判断是否需要，点击右下角“添加数字人”，软件会根据提供的内容生成对应音视频并添加到当前视频轨道中。 左下角会提示渲染完成时间，完成后可点击预览按钮查看效果。 2. 增加背景图片 删除先前导入的文本内容。 点击左上角“媒体”菜单，点击“导入”按钮，选择本地一张图片上传。 点击图片右下角的加号将图片添加到视频轨道上（会覆盖数字人）。 点击轨道最右侧的竖线，向右拖拽直到视频最后，使图片在整个视频播放时都显示。 选中背景图片所在轨道，拖动图片的角将其放大到适合尺寸，并将数字人拖动到合适位置。 此外，如果您想创作一个生物融合成新物种的视频，例如猪和老鹰融合成一个新的物种，以 GPT4 为例的制作教程如下： 1. 故事情节的构思 构思一个吸引人的故事情节，比如新物种的起源故事，结合猪和老鹰的特点以及这种融合带来的独特能力和挑战，考虑添加神秘或奇幻元素增强阴暗风格。 2. 视觉效果的设计 使用 3D 建模和特效技术创造出既霸气又具有阴暗风格的新物种形象，高质量的视觉效果和流畅的动画能吸引更多观众并提高视频的分享率。 3. 音乐和声音设计 配置适当的背景音乐和声效，以增强视频的氛围，选择能激起观众情绪的音乐和声音效果，让视频更加引人入胜。 4. 社交媒体互动
2024-11-23
如果选择一个最需要的AI工具，你会建议我学什么？比如视频剪辑？
如果要选择一个最需要学习的 AI 工具用于视频剪辑，以下是一些相关建议： 工具选择： 剪映是一个较为方便的选择，它具有很多人性化设计和简单的音效库、小特效。但也存在一些不足，如无法协同工作和导出工程文件，难以与其他软件进行工程联通，影响视频的商业化效果。 剪辑流程： 1. 视频粗剪：先确定画面逻辑，声音可作部分参考，快速对片子全貌有整体把握，把素材放上，再进行细节调整和画面替换。画面不需要精美，重点是把握整体。 2. 视频定剪：将画面素材调整和替换到满意效果。 3. 音效/音乐：以剪映为例，有简单音效库，复杂音效可能需另外制作。使用商用音乐要注意版权。 4. 特效：以剪映为例，可适当添加一些光的效果。 5. 包装（如字幕）：字幕最后上，剪映可智能匹配字幕再修改。 故事创作： 除了工具，故事也很重要。故事来源有两条路径： 1. 原创（直接经验）：自身或周围人的经历、做过的梦、想象的故事等。 2. 改编（间接经验）：经典 IP、名著改编、新闻改编、二创等。 剧本写作： 编剧有一定门槛，不能仅套剧作理论和模版，要多写多实践，再结合看书总结经验。短片创作可从自身或朋友经历改编入手，或对触动自己的短篇故事进行改编。多与他人讨论故事，有助于修改和进步。 声音制作： 在传统影视制作中，声音部分包括现场录音、后期配音、音效音乐制作等。对于 AI 声音制作对话，如使用 11labs 进行英文对白制作，效果较好但存在没有情绪和情感的问题，需通过标点符号改变语音效果，不断抽卡调试。国内可使用魔音工坊，其有情绪调节控件。 剪辑软件： 对于 13 分钟的短片，剪映较方便；更长篇幅或追求更好效果，可能需使用 PR/FCP/达芬奇等传统剪辑软件。
2024-11-22
中国国产最好用的免费视频AI是哪个呢
以下是一些中国国产好用的免费视频 AI 工具： Hidreamai（国内，有免费额度）：https://hidreamai.com//AiVideo 。支持文生视频、图生视频，提示词使用中文、英文都可以，文生视频支持正向提示词、反向提示词、运镜控制、运动强度控制，支持多尺寸，可以生成 5s 和 15s 的视频。 ETNA（国内）：https://etna.7volcanoes.com/ 。是一款由七火山科技开发的文生视频 AI 模型，能根据用户简短的文本描述生成相应的视频内容。生成的视频长度在 8 15 秒，画质可达 4K，最高 38402160，画面细腻逼真，帧率 60fps。 Dreamina（国内内测，有免费额度）：https://jimeng.jianying.com/aitool/video/generate 。支持文生视频、图生视频、视频生视频，支持图生视频首尾帧功能，提示词使用中文、英文都可以。 可灵（免费）：https://klingai.kuaishou.com/ 。支持文生视频、图生视频，支持图生视频首尾帧功能，提示词可使用中文。 此外，还有一些其他的相关工具： Leiapix：https://www.leiapix.com/ ，免费，可把一张照片转动态。 Krea：https://www.krea.ai/ ，12 月 13 日免费公测。 luma： ，30 次免费。 hailuoai：https://hailuoai.video/ ，新账号 3 天免费，过后每天 100 分，语义理解能力强。 Opusclip：https://www.opus.pro/ ，可利用长视频剪成短视频。 Raskai：https://zh.rask.ai/ ，短视频素材可直接翻译至多语种。 invideoAI：https://invideo.io/make/aivideogenerator/ ，输入想法生成脚本和分镜描述，生成视频后可人工二编合成长视频。 descript：https://www.descript.com/?ref=feizhuke.com 。 veed.io：https://www.veed.io/ ，有一次免费体验，可自动翻译自动字幕。 clipchamp：https://app.clipchamp.com/ ，免费，高级功能付费。 typeframes：https://www.revid.ai/?ref=aibot.cn ，有免费额度。
2024-11-22
推荐一款国内不错的AI视频生成软件
以下为您推荐几款国内不错的 AI 视频生成软件： 1. 可灵：在 AI 视频生成领域表现出色，具有以下优势： 卓越的视频生成质量，与国际顶级模型相当，能满足普通用户和专业创作者的需求。 生成速度快，处理效率高于国外同类产品，提升用户工作效率。 对国内用户可访问性强，提供便捷、稳定的使用体验。 2. Hidreamai：有免费额度，支持文生视频、图生视频，提示词使用中文、英文均可，文生视频支持多种控制，可生成 5s 和 15s 的视频。网址：https://hidreamai.com//AiVideo 3. ETNA：由七火山科技开发，可根据简短文本描述生成相应视频内容，生成视频长度 8 15 秒，画质可达 4K，最高 38402160，画面细腻逼真，帧率 60fps，支持中文，时空理解。网址：https://etna.7volcanoes.com/ 此外，还有 Pika、SVD、Runway、Kaiber、Sora 等国内外提供此类功能的产品，您可以根据自己的具体情况进行选择。更多的文生视频网站可查看： 需注意，以上内容由 AI 大模型生成，请仔细甄别。
2024-11-22
如何做一个我自己的AI数字人进行短视频出镜主播
以下是制作您自己的 AI 数字人进行短视频出镜主播的方法： 一、准备视频内容 1. 准备一段视频中播放的文字内容，可以是产品介绍、课程讲解、游戏攻略等。您也可以利用 AI 来生成这段文字。 2. 使用剪映 App 对视频进行处理。电脑端打开剪映 App，点击“开始创作”。选择顶部工具栏中的“文本”，并点击默认文本右下角的“+”号，为视频添加一个文字内容的轨道，然后将准备好的文字内容替换默认文本内容。这将为数字人提供语音播放的内容以及生成相对应的口型。 二、生成数字人 1. 在剪映右侧窗口顶部，打开“数字人”选项，选取一位免费且适合的数字人形象，例如“婉婉青春”。选择数字人形象时，软件会播放其声音，您可判断是否需要，点击右下角的“添加数字人”，将其添加到当前视频中。 2. 剪映 App 会根据提供的内容生成对应音视频，并添加到当前视频文件的轨道中。左下角会提示渲染完成时间，您可点击预览按钮查看生成的数字人效果。 三、增加背景图片 1. 直接删除先前导入的文本内容，因为视频中的音频已包含文字内容。 2. 为视频增加背景图片。点击左上角的“媒体”菜单，并点击“导入”按钮，选择本地的一张图片上传。 3. 点击图片右下角的加号，将图片添加到视频的轨道上（会覆盖数字人）。 4. 点击轨道最右侧的竖线，向右拖拽直到与视频对齐。 5. 选中背景图片所在的轨道，在显示区域拖动背景图的一个角，将图片放大到适合尺寸，并将数字人拖动到合适位置。 另外，您还可以通过以下网站生成虚拟数字人短视频： 1. 打开网站（要科学）：https://studio.did.com/editor 2. 输入内容选项，在右侧的文字框里面输入从 ChatGPT 产生的内容，还可以更换想要的头像，选择不同的国家和声音。 3. 内容和人像都选择好之后，点击右上角的 Create Video，等待一段时间生成。生成好数字人视频后，结合产品做讲解即可发布去做视频带货。
2024-11-22
现在哪几家的大模型支持通过手机视频多模态实时交流？
以下几家的大模型支持通过手机视频多模态实时交流： 1. PandaGPT：能够理解不同模式的指令并根据指令采取行动，包括文本、图像/视频、音频、热、深度和惯性测量单位。 2. VideoLLaMA：引入了多分支跨模式 PT 框架，使语言模型能够在与人类对话的同时处理给定视频的视觉和音频内容。 3. 视频聊天 GPT：专门为视频对话设计，能够通过集成时空视觉表示来生成有关视频的讨论。 4. NExTGPT：端到端、通用的 anytoany 多模态语言模型，支持图像、视频、音频、文本的自由输入输出。
2024-11-22
免费文生图
以下是一些免费的文生图工具和相关信息： Pika labs：目前推出了 Beta 版本，支持免费、不限次数地文生视频、图生视频，生成的视频会带上官方水印。官方 Twitter：https://twitter.com/pika_labs 。优秀案例：近期 x 上一个创作者发布的庆祝星球大战 100 周年的短片做的非常成功，这位导演用 Pika labs 产出的视频都非常高质量。 DALL·E：OpenAI 推出的一款文生图工具，可以根据输入的文本描述生成逼真的图片。 StableDiffusion：开源的文生图工具，可以生成高质量的图片，并且支持多种模型和算法。 MidJourney：因其高质量的图像生成效果和用户友好的界面设计而受到广泛欢迎，在创意设计人群中尤其流行。 您还可以在 WaytoAGI 网站（https://www.waytoagi.com/category/104）查看更多文生图工具。 此外，文字生成视频的 AI 产品有： Pika：非常出色的文本生成视频 AI 工具，擅长动画制作，并支持视频编辑。 SVD：如果熟悉 Stable Diffusion，可以直接安装这款最新的插件，在图片基础上直接生成视频。这是由 Stability AI 开源的 video model。 Runway：老牌 AI 视频生成工具，提供实时涂抹修改视频的功能，但需要收费。 Kaiber：视频转视频 AI，能够将原视频转换成各种风格的视频。 Sora：由 OpenAI 开发，可以生成长达 1 分钟以上的视频。 更多的文生视频的网站可以查看：
2024-11-23
文生图反向推出提示词
在文生图中，反向推出提示词的方式主要有以下几种： 1. 在图生图功能中，除了文本提词框外，还有图片框输入口。随便照一张照片拖入后，文本输入框旁边有两个反推提示词的按钮：CLIP 可以通过图片反推出完整含义的句子；DeepBooru 可以反推出关键词组。例如一张小男孩坐在长凳上的图片，通过 CLIP 反推得到的提示词为“a young boy sitting on a bench with a toy train and a lego train set on the floor next to him,Adam Rex,detailed product photo,a stock photo,lyco art”，通过 DeepBooru 反推得到的提示词为“shoes,solo,hat,orange_background,yellow_background,smile,socks,black_hair,sitting,sneakers”。但这两种方式生成的提示词可能存在瑕疵，需要手动补充信息。补充好提示词后，调整宽度和高度，使红框刚好匹配图片，同时注意两个重要参数：提示词相关性和重绘幅度。 2. 利用上一期活动图片反推工作流，使用唯美港风图片进行反推提示词，在大模型后接一个相关模型。上一期活动链接：。 3. 利用抱脸的 joycaption 图片反推提示词，然后在哩布上跑 flux 文生图工作流。joycaption 链接（需要魔法）：https://huggingface.co/spaces/fancyfeast/joycaptionprealpha 。文生图工作流： 。在哩布上跑文生图：https://www.liblib.art/modelinfo/e16a07d8be544e82b1cd14c37e217119?from=personal_page 。 在写文生图的提示词时，例如“”。
2024-11-22
文生图模型性能排行
以下是一些文生图模型的性能排行相关信息： Kolors 是最近开源的文生图模型中表现出色的一个。它具有更强的中文文本编码器、高质量的文本描述、人标的高质量图片、强大的中文渲染能力以及巧妙解决高分辨率图加噪问题的 noise schedule，实测效果不错。 PIKA1.0 是一个全新的模型，文生视频和文生图的质量都有大幅度提升。在文生图方面稳定得令人惊讶，3D 和 2D 的动画效果出色。 为全面比较 Kolors 与其他模型的生成能力，构建了包含人工评估、机器评估的全面评测内容。在 KolorsPrompts 评估集中，Kolors 在整体满意度方面处于最优水平，其中画面质量显著领先其他模型。具体的平均分数如下： AdobeFirefly：整体满意度平均分 3.03，画面质量平均分 3.46，图文相关性平均分 3.84。 Stable Diffusion 3：整体满意度平均分 3.26，画面质量平均分 3.5，图文相关性平均分 4.2。 DALLE 3：整体满意度平均分 3.32，画面质量平均分 3.54，图文相关性平均分 4.22。 Midjourneyv5：整体满意度平均分 3.32，画面质量平均分 3.68，图文相关性平均分 4.02。 Playgroundv2.5：整体满意度平均分 3.37，画面质量平均分 3.73，图文相关性平均分 4.04。 Midjourneyv6：整体满意度平均分 3.58，画面质量平均分 3.92，图文相关性平均分 4.18。 Kolors：整体满意度平均分 3.59，画面质量平均分 3.99，图文相关性平均分 4.17。所有模型结果取自 2024.04 的产品版本。
2024-11-18
用 mj 做文生图，Prompt 模板
以下是使用 MJ 进行文生图的 Prompt 模板： 1. 定主题：明确您需要生成一张什么主题、什么风格、表达什么信息的图。 2. 选择基础模型 Checkpoint：按照主题，找内容贴近的 checkpoint。一般喜欢用模型大佬麦橘、墨幽的系列模型，如麦橘写实、麦橘男团、墨幽人造人等，效果较好。 3. 选择 lora：在想要生成的内容基础上，寻找内容重叠的 lora，以控制图片效果及质量。可多参考广场上好看的帖子中使用的 lora。 4. ControlNet：用于控制图片中特定的图像，如人物姿态、生成特定文字、艺术化二维码等，属于高阶技能，可后续学习。 5. 局部重绘：下篇再教。 6. 设置 VAE：无脑选择 840000 这个即可。 7. Prompt 提示词：用英文写想要 AI 生成的内容，使用单词和短语的组合，不用管语法，单词、短语之间用英文半角逗号隔开。 8. 负向提示词 Negative Prompt：用英文写想要 AI 避免产生的内容，同样不用管语法，只需单词和短语组合，中间用英文半角逗号隔开。 9. 采样算法：较复杂，一般选 DPM++ 2M Karras 较多。最稳妥的是留意 checkpoint 的详情页上模型作者是否有推荐采样器，使用推荐的采样器更有保障。 10. 采样次数：根据采样器特征，选 DPM++ 2M Karras 后，采样次数一般在 30 40 之间，多了意义不大且慢，少了出图效果差。 11. 尺寸：根据个人喜好和需求选择。 另外，使用 Stability AI 基于 Discord 的媒体生成和编辑工具进行文生图时： 1. 点击链接进入官方 DISCORD 服务器：https://discord.com/invite/stablediffusion 。 2. 进入 ARTISAN 频道，任意选择一个频道。 3. 输入/dream 会提示没有权限，点击链接，注册登录，填写信用卡信息以及地址，点击提交，会免费试用三天，三天后开始收费。 4. 输入/dream 提示词，这部分和 MJ 类似。 5. 和 MJ 手工输入参数不同，可选参数有五类： prompt：提示词，正常文字输入，必填项。 negative_prompt：负面提示词，填写负面提示词，选填项。 seed：种子值，可以自己填，选填项。 aspect：长宽比，选填项。 model：模型选择，SD3，Core 两种可选，选填项。 Images：张数，1 4 张，选填项。完成后选择其中一张。 在 MJ 应用篇儿童绘本制作、人物一致性方面： 1. 生成人物图片：确定人物形象，如“a little girl wearing a yellow floral skirt + 人物动作 + 风格词”，在 mj 中生成直到得到满意的人物图像。垫图 URL + “In the forest,a little girl wearing a yellow floral skirt is playing happily,super high details,HDsmooth,by Jon Burgerman,s 400 ar 3:4 niji 5 style expressive iw 2”，iw 取值范围，不填写默认 iw = 1，iw 值越大越接近垫的图像，反之更接近提示词。为确保人物一致性，取 iw 2 。 2. 合成人物和场景，垫图并重新生成：使用 PS 或者 Canva 将人物和场景合成到一张图，若色调不和谐（若画面和谐或 PS 技术足够，也可不用图生图），将合成后的图作为垫图（iw 2），mj 重新生图，如“prompt：垫图 url + Little girl wearing a yellow floral skirt,and her friend brown bear,taking shelter in the cave,rainstorm,super high details,HDsmooth,by Jon Burgerman,s 400 ar 3:4 niji 5 style expressive iw 2”。 3. 绘本展示。
2024-11-15
文生图的 Prompt 模板
以下是关于文生图的 Prompt 模板的相关内容： 通常描述逻辑包括人物及主体特征（如服饰、发型发色、五官、表情、动作），场景特征（如室内室外、大场景、小细节），环境光照（如白天黑夜、特定时段、光、天空），画幅视角（如距离、人物比例、观察视角、镜头类型），画质（如高画质、高分辨率），画风（如插画、二次元、写实）。通过这些详细的提示词，能更精确地控制 Stable Diffusion 的绘图。 对于新手，有功能型辅助网站帮助书写提示词，如 http://www.atoolbox.net/ ，可通过选项卡方式快速填写关键词信息；https://ai.dawnmark.cn/ ，每种参数有缩略图参考，方便直观选择提示词。还可以去 C 站（https://civitai.com/）抄作业，复制每一张图的详细参数并粘贴到正向提示词栏，然后点击生成按钮下的第一个按键，不过要注意图像作者使用的大模型和 LORA，不然即使参数一样，生成的图也会不同，也可只取其中较好的描述词使用。 在 Tusiart 中，文生图的操作流程如下： 定主题：确定要生成的图的主题、风格和表达的信息。 选择基础模型 Checkpoint：找内容贴近主题的 checkpoint，如麦橘、墨幽的系列模型。 选择 lora：寻找内容重叠的 lora 控制图片效果及质量。 ControlNet：控制图片中特定的图像，如人物姿态、特定文字、艺术化二维码等。 设置 VAE：无脑选择 840000 。 Prompt 提示词：用英文写需求，单词和短语组合，用英文半角逗号隔开，不用管语法和长句。 负向提示词 Negative Prompt：用英文写要避免的内容，单词和短语组合，用英文半角逗号隔开。 采样算法：如选 DPM++ 2M Karras，留意 checkpoint 详情页上模型作者推荐的采样器。 采样次数：根据采样器特征，如选 DPM++ 2M Karras 采样次数在 30 40 之间。 尺寸：根据喜好和需求选择。 在一些提示词中，括号和“:1.2”等是用来增加权重的，权重越高在画面中体现越充分，提示词的先后顺序也会影响权重。同时还有反向提示词，告诉 AI 不要的内容。
2024-11-15
请推荐一下文生PPT好用的免费软件
以下为您推荐几款文生 PPT 好用的免费软件： 1. 歌者 PPT（gezhe.com）： 功能：话题生成（一键生成 PPT 内容）、资料转换（支持多种文件格式转 PPT）、多语言支持（生成多语言 PPT）、模板和案例（海量模板和案例库）、在线编辑和分享（生成结果可自由编辑并在线分享）、增值服务（自定义模板、字体、动效等）。 产品优势：免费使用（所有功能永久免费）、智能易用（通过 AI 技术简化 PPT 制作流程，易于上手）、海量案例（大量精美模板和优秀案例可供选择和下载）、资料转 PPT 很专业（支持多种文件格式，转换过程中尊重原文内容）、AI 翻译（保持 PPT 原始排版不变，多语言在线即时翻译）。 推荐理由：完全免费，智能化程度高，模板和案例库丰富，对多语言支持好，适合不太擅长制作 PPT 或者时间紧张的人群。 2. Gamma： 作为在各种交流群中频繁推荐的产品，以其卓越的性能和用户体验赢得广泛认可。免费版本也能生成质量非常高的 PPT，随着不断优化和改进，能满足大多数用户的需求。个人使用体验良好，生成效果令人满意，在内容组织、设计美观度和整体专业感方面表现出色。 目前市面上大多数 AI 生成 PPT 按照以下思路完成设计和制作： 1. AI 生成 PPT 大纲 2. 手动优化大纲 3. 导入工具生成 PPT 4. 优化整体结构 推荐 2 篇市场分析的文章供参考： 1. 《》 2. 《》 请注意，以上内容由 AI 大模型生成，请仔细甄别。
2024-11-13
制作图片的AI工具，名字好像叫comfyUI
ComfyUI 是一个基于节点流程式的 stable diffusion AI 绘图工具 WebUI。 其优势包括： 1. 对显存要求相对较低，启动和出图速度快。 2. 生成自由度更高。 3. 可以和 webui 共享环境和模型。 4. 能搭建自己的工作流程，可导出并分享，报错时能清晰定位错误。 5. 生成的图片拖进后会还原整个工作流程，模型也会选择好。 劣势在于： 1. 操作门槛高，需要清晰的逻辑。 2. 生态不如 webui 丰富，但有针对其开发的有趣插件。 您可以从 github 上下载作者部署好环境和依赖的整合包，按照官方文档安装，官方链接为：https://github.com/comfyanonymous/ComfyUI 。 此外，有人认为如果 contornet 让 AI 绘画从玩具变成工具，那 ComfyUI 就是制作工具的工具。同时，藏师傅介绍了用 ComfyUI 三步制作任意公司周边图片的流程，整个流程分为获取 Logo 图片的描述、根据描述和生成意图生成图片提示词、将图片和提示词输入 ComfyUI 工作生成。
2024-11-23
最新的AI资讯
以下是为您提供的最新 AI 资讯： 新手学习 AI 方面：AI 是快速发展的领域，新的研究成果和技术不断涌现。您可以关注 AI 领域的新闻、博客、论坛和社交媒体，保持对最新发展的了解。考虑加入 AI 相关的社群和组织，参加研讨会、工作坊和会议，与其他 AI 爱好者和专业人士交流。 AIGC Weekly 32 方面： Netflix 列出了一个年薪 90 万美元的机器学习平台产品经理的 AI 产品工作岗位： Shopify 的 AI 助手现已上线。Sidekick 是一个帮助机器人，它知道如何在 Shopify 中执行任何操作提取相关数据、操作新功能或创建报告： Artifact（Ins 创始人做的 AI 新闻浏览软件）推出了自定义内容阅读语音的功能： OpenAI、谷歌、微软和 Anthropic 组建了前沿模型论坛，主要目的是确保 AI 模型的安全发展： Open AI 悄咪咪下线了他们的 ChatGPT 生成内容的检测器： 2024 人工智能报告方面： 全球芯片出口管制下，中国仍成重要市场。美国商务部长吉娜·雷蒙多警告英伟达，中国在美芯片制造商中所占的份额正在减少。字节跳动通过美国的甲骨文租用 NVIDIA H100 访问权限，而阿里巴巴和腾讯则与 NVIDIA 就在美国建立自己的数据中心进行谈判。与此同时，谷歌和微软直接向中国大型企业推销他们的云服务。 模型变得更便宜了。以前认为提供强大模型的成本过高，但现在提供这些模型的推断成本正在下降。OpenAI 更达到 100 倍下降！Google Gemini 生产了一种具有很强竞争力的定价系列！Gemini 1.5 Pro 和 1.5 Flash 的价格在推出后几个月内下降了 64%86%，而性能强劲，例如 Flash8B 比 1.5 Flash 贵 50%，但在许多基准测试中表现相当。注意：价格适用于<128K 令牌提示和输出。检索日期为 2024 年 10 月 4 日。考虑到计算成本很高，模型构建者越来越依赖与大型科技公司建立合作伙伴关系。反垄断监管机构担心这将进一步巩固现有公司的地位。
2024-11-23
AI分镜
以下是关于《李清照》AI 视频创作的分镜内容： |分镜|子分镜|分镜主视觉|配音|角色|配音|画面| |||||||| |8|0801<br>0802|嗯~谁在叫我<br>小姑娘，你从哪里来？你叫什么名字呀？|王维||| |9|0901 疑惑<br>0902 诗文|疑惑自言自语<br>疑惑的表情<br>看到明月松间照，清泉石上流惊喜|我叫什么名字呢？（疑惑）<br>哦~（惊讶）<br>李清照吟诵：明月松间照，清泉石上流。|少年李清照|| |10|1001 惊喜<br>1002 照清高亮|李清照灵机一动<br>墙上诗：明月松间照，清泉石上流。照和清高亮显示|背景音效：灵机一动|||| |11|11 得意|李清照脸部特写，惊喜表情|我叫李清照（高兴）|少年李清照|| |12|12 王维沉思|王维沉思|李清照~李清照，好名字、好名字|王维|| |13|13 夜景|明月下溪水潺潺|王维吟诵：明月松间照，清泉石上流。|王维|| |20|20|画面穿越到当代写字楼办公室|忙乱和电话铃声|背景声|| |21|21|面对电脑的李清照一脸茫然|||| |22|22|旁边两个同事聊天|你们打算什么时间要孩子？<br>要孩子，要什么孩子，我们是丁克家庭。|同事甲<br>同事乙|| |23|23|李清照满脑子疑惑，丁克是什么意思|疑问背景音|背景声|| |24|24|李清照查询丁克的意思，发现是不要孩子的家庭。|||| |25|25|旁边两个同事聊天|那你不打算结婚吗？<br>我才 30 岁，结哪门子婚，我的环游世界梦想还没有实现呢|同事甲<br>同事乙|| |26|26|李清照满脑子疑惑，为什么可以不结婚？怎么生活？|疑问背景音|背景声|| |27|27|李清照开始查阅资料|清照~清照~你不下班吗？<br>哦哦~我查点资料|同事甲<br>李清照|| |1||远景一个古装小女孩草丛中嬉戏|背景音乐：小女孩嬉戏声|||| |2|0201 欢快<br>0202 疑惑|李清照与蝴蝶对话：远景、特写|蝴蝶：你叫什么名字呀？（欢快）<br>李清照：嗯~嗯~我叫什么名字呢？（疑惑）|蝴蝶<br>少年李清照|| |3|0202 放大|李清照特写|||| |4|04 穿越唐代|李清照满是疑惑|画外音：这是什么地方？（疑惑）|少年李清照|| |5|《辋川别业》建筑|写有《辋川别业》的古代建筑|辋川别业、辋川别业，难到这是王维的住处!（恍然大悟）|少年李清照|| |6|06|《维摩诘诗集》特写|真的是王维（高兴）|少年李清照|| |7|07|李清照高兴奔向王维|王伯伯~王伯伯~（高兴）|少年李清照||
2024-11-23
学习AI
以下是针对新手学习 AI 的建议： 1. 了解 AI 基本概念： 阅读「」部分，熟悉 AI 的术语和基础概念，包括其主要分支（如机器学习、深度学习、自然语言处理等）以及它们之间的联系。 浏览入门文章，了解 AI 的历史、当前的应用和未来的发展趋势。 2. 开始 AI 学习之旅： 在「」中，找到为初学者设计的课程，特别推荐李宏毅老师的课程。 通过在线教育平台（如 Coursera、edX、Udacity）上的课程，按照自己的节奏学习，并有机会获得证书。 3. 选择感兴趣的模块深入学习： AI 领域广泛，比如图像、音乐、视频等，可根据自己的兴趣选择特定模块深入学习。 掌握提示词的技巧，其上手容易且很有用。 4. 实践和尝试： 理论学习后，实践是巩固知识的关键，尝试使用各种产品做出作品。 在知识库中有很多大家实践后的作品、文章分享。 5. 体验 AI 产品： 与现有的 AI 产品进行互动，如 ChatGPT、Kimi Chat、智谱、文心一言等 AI 聊天机器人，了解其工作原理和交互方式。 对于中学生学习 AI，建议如下： 1. 从编程语言入手学习： 从 Python、JavaScript 等编程语言开始，学习编程语法、数据结构、算法等基础知识。 2. 尝试使用 AI 工具和平台： 使用 ChatGPT、Midjourney 等 AI 生成工具，体验 AI 的应用场景。 探索面向中学生的 AI 教育平台，如百度的“文心智能体平台”、Coze 智能体平台等。 3. 学习 AI 基础知识： 了解 AI 的基本概念、发展历程、主要技术如机器学习、深度学习等。 学习 AI 在教育、医疗、金融等领域的应用案例。 4. 参与 AI 相关的实践项目： 参加学校或社区组织的 AI 编程竞赛、创意设计大赛等活动。 尝试利用 AI 技术解决生活中的实际问题，培养动手能力。 5. 关注 AI 发展的前沿动态： 关注 AI 领域的权威媒体和学者，了解 AI 技术的最新进展。 思考 AI 技术对未来社会的影响，培养对 AI 的思考和判断能力。 记住，学习 AI 是一个长期的过程，需要耐心和持续的努力。不要害怕犯错，每个挑战都是成长的机会。完整的学习路径建议参考「通往 AGI 之路」的布鲁姆分类法，设计自己的学习路径。
2024-11-23
有什么 ai 辅助打工人学习的工具推荐
以下是为打工人推荐的一些 AI 辅助学习工具： 英语学习工具： 1. Speak：这是一款 AI 英语学习 APP，利用先进的 AI 语言学习技术，提供全面实时反馈，支持随时随地练习口语，且 OpenAI 曾投资该公司。 2. Duolingo：提供游戏化学习平台，通过 AI 辅助教学，帮助学习新词汇和短语，其口语练习功能有助于练习发音和口语表达。 3. Call Annie：在发音过程中能根据发言调整表情和动作，让人感觉如同与真人对话，可随时通过视频或语音进行英语对话。 英语和数学通用学习方法： 1. 利用智能辅助工具，如英语写作助手 Grammarly 进行写作和语法纠错。 2. 借助语音识别应用，如 Call Annie 进行口语练习和发音纠正。 3. 使用自适应学习平台，如 Duolingo 为您量身定制学习计划。 4. 运用智能导师和对话机器人，如 ChatGPT 进行会话练习和对话模拟。 数学学习工具： 1. 自适应学习系统，如 Khan Academy，结合 AI 技术提供个性化学习路径和练习题。 2. 智能题库和作业辅助工具，如 Photomath，通过图像识别和数学推理技术提供数学问题解答和解题步骤。 3. 虚拟教学助手，如 Socratic，利用 AI 技术解答数学问题、提供教学视频和答疑服务。 4. 参与交互式学习平台，如 Wolfram Alpha 的数学学习课程和实践项目，利用 AI 技术进行数学建模和问题求解。 内容仿写工具： 1. 秘塔写作猫：https://xiezuocat.com/ ，是 AI 写作伴侣，能推敲用语、斟酌文法、改写文风，实时同步翻译，支持全文改写、一键修改、实时纠错并给出修改建议，智能分析文章属性并打分。 2. 笔灵 AI 写作：https://ibiling.cn/ ，是智能写作助手，支持多种文体写作，能一键改写/续写/扩写，智能锤炼打磨文字。 3. 腾讯 Effidit 写作：https://effidit.qq.com/ ，由腾讯 AI Lab 开发，能提升写作者的写作效率和创作体验。 更多 AI 写作类工具可以查看：https://www.waytoagi.com/sites/category/2 。请注意，以上内容由 AI 大模型生成，请仔细甄别。
2024-11-23
免费图生图的AI
以下是一些免费的图生图 AI 工具： 1. Artguru AI Art Generator：这是一个在线平台，能够生成逼真图像，为设计师提供灵感，丰富创作过程。 2. Retrato：一种 AI 工具，可以将图片转换为非凡肖像，拥有 500 多种风格选择，适合制作个性头像。 3. Stable Diffusion Reimagine：新型 AI 工具，通过稳定扩散算法生成精细、具有细节的全新视觉作品。 4. Barbie Selfie Generator：专为喜欢梦幻童话风格的人设计的 AI 工具，能将上传的照片转换为芭比风格，效果很好。 此外，常见的文生图工具包括： 1. DALL·E：由 OpenAI 推出，可根据输入的文本描述生成逼真的图片。 2. StableDiffusion：开源的文生图工具，能生成高质量的图片，支持多种模型和算法。 3. MidJourney：因其高质量的图像生成效果和用户友好的界面设计而受到广泛欢迎，在创意设计人群中尤其流行。 在 WaytoAGI 网站（https://www.waytoagi.com/category/104）可以查看更多文生图工具。 关于图生图的使用： 1. 图生图的作用：允许用户上传一张图像，并基于该图像生成新的视觉内容。 2. 如何使用图生图： 应用图生图： 在 prompt 输入框下，点击“图生图”上传本地文件。 在无限画布中的图片功能区进行选择。 调整“图生图”功能区参数： 参考程度： 更像原图：小幅度修改基底图像，有限地增加元素。 更创意：大幅度修改基底图像，可搭配增强模型加入更多的元素。 自定义：可自定义修改重绘幅度。 增加参考纬度：点击添加按钮，会自动应用并打开“生成器”的图片参考功能。 替换图像：鼠标滑动到图像，点击“选择参考图”即可重新选择图片。 转换提示词：反推参考图信息填入进提示词框中。 同步生图尺寸：同步参考图尺寸到“生成器”的生图尺寸中。
2024-11-21
图生图
图生图是一种基于人工智能的图像处理方式。以下是关于图生图的一些重要信息： 概念与功能说明： 首页包含模型、帖子、排行榜，其中发布了各种模型和生成的图片。模型有 checkpoint 和 lora 两种标签，还有属于 SDXL 新模型的 XL 标签。点击可查看模型详情，下方是返图区。 基础模型（checkpoint）是生图必需的，任何生图操作都要先选定。lora 是低阶自适应模型，类似 checkpoint 的小插件，可有可无，但对细节控制有价值。ControlNet 可控制图片特定图像，如人物姿态、生成特定文字等，属于高阶技能。VAE 是编码器，类似滤镜，调整生图饱和度，一般选择 840000 即可。Prompt 提示词是想要 AI 生成的内容，负向提示词是想要 AI 避免产生的内容。 上传图片后，sd 会根据图片、所选模型、输入的 prompt 等信息进行重绘，重绘幅度越大，输出图与输入图差别越大。 基础工作流搭建副本中的图生图： 在 Fooocus 软件的“图生图”功能中，载入图片并点击“加载到输入”，将“图生图”打上勾，点击生成可得到相同构图的图像。切换风格，如“SAI 动漫”，可生成相同动作的动漫风格人物图像，右边的两个参数可控制图像与参考图的相似程度。 此外，Fooocus 有分支加强版 FooocusMRE（MoonRide 版），加入了图生图和 ControlNet 功能，对硬件要求不高，4G 显存就能出图，使用便捷。
2024-11-18
图生文模型
以下是关于图生文模型的相关信息： Kolors 是一款强大的开源文生图模型，具有更强的中文文本编码器、机造的高质量文本描述、人标的高质量图片、强大的中文渲染能力，以及巧妙的 noise schedule 解决高分辨率图加噪不彻底的问题。实测效果很不错，展现了快手的技术实力。 Tripo AI 中，文生 3D 模型是用一段文字生成 3D 模型，在「Create」界面底部输入框输入提示词（不支持中文），不会写提示词可点击输入框左侧的</>按钮随机生成并自动填入。填写好提示词后点击右侧「Create」生成 3D 模型，每次生成 4 个基础模型，不满意可点击「Retry」重新生成。有满意的模型点击单个模型下方黄色的「Refine」精修，精修进度在「My Models」中查看，一般 5 分钟左右完成。图生 3D 模型是用一张图片生成 3D 模型，点击输入框右侧的图标上传图片即可生成，一次生成一个基础模型，同样支持重生成和精修。 Tusiart 文生图操作流程包括：定主题，确定生成图片的主题、风格和信息；选择基础模型 Checkpoint，找内容贴近的模型；选择 lora，寻找内容重叠的 lora 控制图片效果及质量；ControlNet 用于控制图片中特定图像；设置 VAE 无脑选择 840000；Prompt 提示词用英文写需求，单词和短语用英文半角逗号隔开；负向提示词 Negative Prompt 用英文写避免产生的内容，单词和短语组合并用英文半角逗号隔开；采样算法一般选 DPM++ 2M Karras，也可参考模型作者推荐的采样器；采样次数根据采样器特征，选 DPM++ 2M Karras 时一般在 30 40 之间；尺寸根据个人喜好和需求选择。
2024-11-13
最新的文生视频/图生视频能力是什么
以下是关于最新的文生视频/图生视频能力的介绍： PIKA1.0 启用了全新的模型，文生视频质量大幅提升，例如输入“Cinematic,happy laughing girl in office,Pixar style”的 Prompt 能瞬间生成匹配皮克斯水平的镜头，且稳定性和神情表现出色，爆杀市面上所有的 AI 视频。在文生图方面，新模型也极其稳定。同时，图生视频效果很棒，人的一致性逆天，语义理解强，动作幅度大。此外，还有一些小技巧，如在右下角第三个设置里，负面提示（Negative prompt）可以常驻“blurry,out of focus,twisted,deformed”，提示词相关性别设 5 15 之间效果较好。 这半年来，除传统的文生视频、图生视频能力迭代外，主要技术发展还围绕着通过转绘改变画风、视频内人物识别和替换方向。在服务头部创作者方面，未来产品会强化编辑器能力和视频细节可控性，并智能化后期制作任务。影视后期方向，可将动捕演员表演转化为虚拟角色提高特效制作效率。专业领域，创作者能通过草图分镜验证效果。在 C 端大众消费侧，AI 视频有望在小说、网文阅读、短情景剧等内容消费方向发挥潜力，人物识别和替换可衍生电商平台虚拟试衣间能力。Viggle、DomoAI 的产品中的模板套用能力若低成本开放在短视频产品中，可能带来新的爆发周期。 Stable Video Diffusion 1.1 新模型以及 stablevideo.com 开始内测，清晰度、控制方式和效果都有很大提升，目前提供文生视频、图生视频两种方式，文生视频先生成 4 张图像选一张用于生成视频，图生视频提供几种控制方式（仅开放了一部分），另外目前提供 17 种风格。
2024-11-10
请总结本知识库，并提炼出11节面向十岁儿童关于AIGC的课程，三节是提示词工程，2节文生文，2节文生图/图生图，2节文生音频，2节文生视频/图生视频，不需要涉及智能体及文生代码
以下是对本知识库的总结： 包含了不同时间段的 AIGC 周刊内容，如 Open AI 发布 ChatGPT 的 iOS 应用、Google 宣布多项 AI 新功能、AI 歌手相关教程等。 有关于提示词工程的课程及相关技巧介绍。 涉及一些特定的 AIGC 技术和方法，如 Donut 文档理解方法。 提到了谷歌的生成式 AI 学习课程。 以下是为十岁儿童设计的 11 节关于 AIGC 的课程： 1. 提示词工程基础 什么是提示词 提示词的作用 简单的提示词示例 2. 提示词工程进阶 复杂提示词的构建 如何优化提示词 提示词的实际应用 3. 提示词工程实践 设计自己的提示词任务 分享与讨论提示词成果 总结提示词的使用技巧 4. 文生文入门 了解文生文的概念 简单的文生文工具介绍 尝试生成一段文字 5. 文生文提高 优化文生文的输入 让生成的文字更有趣 比较不同文生文的效果 6. 文生图/图生图基础 认识文生图和图生图 常见的文生图工具 用简单描述生成一张图片 7. 文生图/图生图进阶 更复杂的描述生成精美图片 对生成的图片进行修改 分享自己生成的图片 8. 文生音频入门 什么是文生音频 简单的文生音频工具 生成一段简单的音频 9. 文生音频提高 让生成的音频更动听 给音频添加特效 欣赏优秀的文生音频作品 10. 文生视频/图生视频基础 文生视频和图生视频的概念 基本的文生视频工具 制作一个简单的视频 11. 文生视频/图生视频进阶 让视频更精彩 视频的后期处理 展示自己制作的视频
2024-10-31
AI图生图工具
以下是一些好用的图生图工具： 1. Artguru AI Art Generator：在线平台，能生成逼真图像，为设计师提供灵感，丰富创作过程。 2. Retrato：AI 工具，可将图片转换为非凡肖像，有 500 多种风格选择，适合制作个性头像。 3. Stable Diffusion Reimagine：新型 AI 工具，通过稳定扩散算法生成精细、具细节的全新视觉作品。 4. Barbie Selfie Generator：专为喜欢梦幻童话风格的人设计，能将上传的照片转换为芭比风格，效果很好。 目前市场上受欢迎的文生图工具包括： 1. DALL·E：由 OpenAI 推出，能根据输入的文本描述生成逼真图片。 2. StableDiffusion：开源工具，可生成高质量图片，支持多种模型和算法。 3. MidJourney：因高质量图像生成效果和用户友好界面设计而受欢迎，在创意设计人群中流行。 您还可以在 WaytoAGI 网站（https://www.waytoagi.com/category/104）查看更多文生图工具。 另外，像吐司（https://tusiart.com/images/635511733697550450?post_id=635512498197535244&source_id=nzywoVHilkK7o_cqaH31xAh）、哩布（https://www.liblib.ai/）这样的网站是免费的在线 SD 工具。 需要注意的是，这些 AI 模型在使用时可能存在一些局限，如偶尔会出现性能不稳定、生成内容不当等问题。同时，本教程适用于入门玩家，如果在使用过程中有任何问题，可以通过评论区、微信（designurlife1st，记得备注来意：ai 绘图交流）等方式与作者联系。教程内容会持续更新。
2024-10-28