以下是制作 AI 漫画的一般流程:
请注意,具体的操作步骤和所需工具可能会根据项目的具体需求和个人偏好有所不同。此外,AI 工具的可用性和功能也可能会随时间而变化,建议直接访问上述提供的工具网址获取最新信息和使用指南。
最近我用AI工具尝试做了一个动画短片,虽然还有很多问题,比如大多都是特写或近景镜头,关系镜头很少,角色无法生成流畅的动作幅度等等。但作为一个不会画画、不会使用技术软件的废柴,能通过AI做动画,还是觉得惊喜又开心的,而且我觉得这些问题,肯定会很快在不久的将来被解决。本来我只是单纯地想分享一下故事本身的内容,但有不少好朋友看了之后,也想尝试自己动手,特别是还有朋友想亲手给老婆做十周年生日惊喜的AI短片,擅长磕CP的我,横竖得把制作流程写了,让他们的爱情长长久久、甜甜蜜蜜。以下是我尝试做的片子,可以先康一康。第一步,写故事+分镜头因为是一分钟的短片,故事内容特别短,也比较简单,我就自己一拍脑门瞎想了一个。也可以借助GPT4、Claude2、智谱清言、Kimi.chat等等应用进行对话,让它们帮你想故事。我的Prompt都很简单,核心的逻辑在,你得把你的需求写清楚。一、故事梗概写作:模版如下:时长/字数:1min/100-300字等主题:爱情/亲情/友情人物:性格+年龄+职业+特征(外貌的或衣物或道具等等)(还可以增加一切能丰富你人物的东西)人物关系:亲人/朋友/恋人未满/夫妻/兄弟/姐妹(人物关系的构建是形成叙事非常关键的一环)结构:开端、发展、高潮、结局(最简单的故事结构)如果套用我的故事,那么我给出的Prompt大概会是这样:
1.小说内容分析:使用AI工具(如ChatGPT)分析小说内容,提取关键场景、角色和情节。2.生成角色与场景描述:根据小说内容,使用工具(如Stable Diffusion或Midjourney)生成角色和场景的视觉描述。3.图像生成:使用AI图像生成工具根据描述创建角色和场景的图像。4.视频脚本制作:将提取的关键点和生成的图像组合成视频脚本。5.音频制作:利用AI配音工具(如Adobe Firefly)将小说文本转换为语音,添加背景音乐和音效。6.视频编辑与合成:使用视频编辑软件(如Clipfly或VEED.IO)将图像、音频和文字合成为视频。7.后期处理:对生成的视频进行剪辑、添加特效和转场,以提高视频质量。8.审阅与调整:观看生成的视频,根据需要进行调整,比如重新编辑某些场景或调整音频。9.输出与分享:完成所有编辑后,输出最终视频,并在所需平台上分享。请注意,具体的操作步骤和所需工具可能会根据项目的具体需求和个人偏好有所不同。此外,AI工具的可用性和功能也可能会随时间而变化,建议直接访问上述提供的工具网址获取最新信息和使用指南。内容由AI大模型生成,请仔细甄别
还做了正则化:模型出来之后,也不是说生了图就能直接用,像一些比较复杂的图,我的方案是先去掉我的微调模型用底模生一张图,然后用ControlNet加上我的微调模型出新图。下面从左到右就是:底模+微调,底模,底模+微调+ControlNet。最后效果不错:而且这个模型在美术做设计参考的时候也能用: