Stable Diffusion、Midjourney 和 DALL·E 这三个生成式 AI 工具主要有以下区别:
在使用方面:
将小说转换成AI视频是一个涉及多个步骤的过程,通常包括文本分析、角色与场景生成、视频编辑与合成等。以下是一些可以利用的工具,以及使用这些工具将小说制作成AI视频的一般流程:[heading3]工具与网址:[content]1.Stable Diffusion(SD):一种AI图像生成模型,可以基于文本描述生成图像。网址:[Stable Diffusion](https://github.com/StabilityAI)2.Midjourney(MJ):另一个AI图像生成工具,适用于创建小说中的场景和角色图像。网址:[Midjourney](https://www.midjourney.com)3.Adobe Firefly:Adobe的AI创意工具,可以生成图像和设计模板。网址:[Adobe Firefly](https://www.adobe.com/products/firefly.html)4.Pika AI:文本生成视频的AI工具,适合动画制作。网址:[Pika AI](https://pika.art/waitlist)5.Clipfly:一站式AI视频生成和剪辑平台。网址:[Clipfly](https://www.aihub.cn/tools/video/clipfly/)6.VEED.IO:在线视频编辑工具,具有AI视频生成器功能。网址:[VEED.IO](https://www.veed.io/zh-CN/tools/ai-video)7.极虎漫剪:结合Stable Diffusion技术的小说推文视频创作提效工具。网址:[极虎漫剪](https://tiger.easyartx.com/landing)8.故事AI绘图:小说转视频的AI工具。网址:[故事AI绘图](https://www.aihub.cn/tools/video/gushiai/)
最透明的选项:[Adobe Firefly](https://www.adobe.com/sensei/generative-ai/firefly.html)开源选项:[Stable Diffusion](https://stable-diffusion-ui.github.io/)最佳免费选项:Bing或[Bing Image Creator](https://www.bing.com/images/create)(使用DALL-E),[Playgound](https://playgroundai.com/)(允许您使用多个模型)最佳质量图像:[MidJourney](https://midjourney.com/)大多数人可以使用四个大型图像生成器:1.Stable Diffusion,它是开源的,你可以在任何高端计算机运行。开始需要付出努力,因为你必须学会正确制作提示,但一旦你做到了,它可以产生很好的结果。它特别适合将AI与来自其他源的图像结合在一起。[如果你走这条路,这里有一个很好的Stable Diffusion指南(请务必阅读第1部分和第2部分)。](https://www.jonstokes.com/p/stable-diffusion-20-and-21-an-overview)2.DALL-E,来自OpenAI,已纳入Bing(您必须使用创意模式)和Bing图像创建器。这个系统很可靠,但比Midjourney差。3.Midjourney,这是2023年中期最好的系统。它的学习曲线最低:只需键入“thing-you-want-to-see--v 5.2”(末尾的--v 5.2很重要,它使用最新的模型),你就会得到一个很好的结果。Midjourney需要Discord。这是[使用Discord的指南](https://www.pcworld.com/article/540080/how-to-use-discord-a-beginners-guide.html)。4.Adobe Firefly内置在各种Adobe产品中,但在质量方面落后于DALL-E和Midjourney。然而,虽然其他两个模型还不清楚他们用于训练人工智能的源图像,但Adobe宣布它只使用它有权使用的图像。
围绕Stable Diffusion和Midjourney等基础模型的兴奋和关注正在产生惊人的估值,但新研究的不断涌现确保新模型将随着新技术的完善而更替。考虑到三个流行的生成性AI模型:Dall-E、Midjourney和Stable Diffusion的网站搜索流量。每个新模型都会有它在聚光灯下的时刻。一种替代的方法可能是构建与特定行业相符的工具套件,这些工具专注于满足给定行业的生成性AI需求,对特定受众有深入的理解,并能丰富地集成到现有的生产流程中(例如游戏的Unity或Unreal)。一个很好的例子是[Runway](https://runwayml.com/),它针对视频创作者的需求,提供AI辅助工具,如视频编辑、绿幕移除、图像修复和运动跟踪。这样的工具可以构建并变现特定的受众,并随着时间的推移添加新的模型。我们尚未看到针对游戏领域的类似Runway的套件出现,但我们知道这是一个正在积极开发的领域。1.法律挑战即将来临所有这些生成性AI模型的共同点是,它们都是使用大量的内容数据集进行训练的,这些数据集通常是通过爬取互联网本身获得的。例如,Stable Diffusion是在从网络上抓取的超过50亿的图像/标题对上进行训练的。目前,这些模型声称它们是根据“合理使用”版权原则运作的,但这一论点尚未在法庭上得到明确的检验。似乎很明显,[法律挑战即将到来](https://venturebeat.com/ai/why-generative-ai-legal-battles-are-brewing-the-ai-beat/),这可能会改变生成性AI的格局。