以下是关于生成固定形象的一些方法和示例:
下面,我将从人设固定、永久记忆、多模态这三个方面来演示AI女友麦洛薇的效果。[heading2]1、人设固定[content]为了稳定人设,需要先将一个包含知识图谱信息的json文件保存在本地。人设的稳定就是依靠这个知识图谱来控制人设,从而达成不会忘记自己的基本特征,以及与其他人或事之间关系的效果。非常适合用来创造动漫或游戏角色,绕开微调获得稳定的人设。以下是给AI女友麦洛薇设定的人设:通过接入飞书的节点,将麦洛薇部署到飞书后,对她的基本信息提问,可以准确的回答出自己的人设。这是通过用户提问获取相关的实体和关系,从人设的知识图谱上获取精确信息,以实现这一功能。[heading2]2、永久记忆[content]与麦洛薇对话时,对于她不知道的信息,她会加以学习,所谓学习,就是将用户信息抽取出实体和关系,存入知识图谱中。通过只返回最近的对话轮次到上下文中,就可以保证不会因为上下文窗口不足而溢出,又因为有知识图谱的加入,保证了被丢弃的记忆可以从知识图谱这一永久记忆中提取出来。当我将我的名字以及关于我的信息告知麦洛薇时,麦洛薇就会修改知识图谱,真正的记住了我说的话。可以看到本地的json文件里已经多了一条关于ailm相关的信息。完美地实现了永久记忆的功能。
作者:白马少年介绍:SD实践派,出品精细教程发布时间:2023-09-22 19:00原文网址:https://mp.weixin.qq.com/s/uUPX5w25rNwKNjdVO6J81w如何让我们在SD中绘制的角色保持一致,这是人们长久以来在探索AI绘画的领域当中一直寻求解决的问题。目前来看,实现这个目标最好的方法就是使用LoRA。但是要训练一个LoRA,我们首先要至少有一个15到20张图片的训练集。在一个固定的形象中,最重要的是面部五官,其次是体型、服装、配饰之类的。所以,我们在收集训练集的过程当中,收集形象的头部图片是很重要的。现实中的人物我们可以通过照片来进行训练,但如果是我们在AI中生成的虚构角色呢?我们就要让这个虚构角色能稳定输出多张不同角度的图片才能达到训练集的要求。今天,我们就来学习一下,如何创建一个虚构人物的多视图角色表。[heading1]#01[heading1]准备工作[content]首先,我们要准备一张人物的多角度图片。这张图一共有15个不同的视图,它的主要作用是可以使用openpose来控制形象的面部角度。尺寸设置的是1328×800px,这样的话,当我们放大两倍之后就能保证每张小图都是512×512px。【一个小知识:稳定扩散输出尺寸必须能被8整除。这个工作表的设置方式是由8像素的分割线和256×256像素的图像组成。】再加上一个网格图,通过lineart来分割不同的块面。接下来,我们来设置controlnet,第一张图选择openpose_face,得到人物的15个面部角度。第二张图选择lineart_standard(from white bg&black line),可以得到清晰的表格分区。为了让小图模式下的人脸不会崩坏,我们可以在增加一个ADetailer的脸部修复插件。
服装要想玩的细致,也是需要了解很多服装相关的知识点,不过这里可以使用一个万能固定句式来尝试「主题」+「风格」+「材质」+「元素」+「玄学佐料」主题:汉服、长羽绒服、连衣裙、礼服裙...风格:简约、现代、复古、朋克、英伦亚文化、文艺复兴、洛可可、超现实主义...材质:棉布、羊毛、丝绸、皮革、工艺...元素:形状、纹理、颜色、细节、图案、配件...感觉要学习的知识有好多好多....服装示例咒语关键词:Chinese dress生成思路:一个穿着中国清代宫廷刺绣旗袍,宽袖渐变红色加上刺绣雪纺面料,镶钻工艺,上面还有金丝雀和白玫瑰元素等刺绣元素咒语:1 girl,she was wearing a Chinese dress,wide sleeves gradient red x embroidered chiffon fabric,qing dynasty palace embroidery,canary and white roses element,embroidered hosta,x diamond-encrusted craftsmanship,elegant,fairy air,digital rendering,super lifelike,super detailed,luxury,movie lighting,super clear details,super clear materials,close-up,complex textures,octane rendering,Zbrush,8K,Vray super lifelike,--ar 9:16前面4张只使用了Chinese dress生成后,服装比较素也没有颜色,服装的细节也比较少。后面2张添加了材质装饰细节之后,服装就比较精致。大家可以通过这个万能的固定句式去尝试一下关于服装的细节。