AI修图 -WayToAGI

回答

以下是关于 AI 修图的相关内容：

在独立游戏开发中，利用 AI 绘画进行修图时可能会遇到一些问题和挑战，同时也有相应的解决方法和技巧。

问题方面：

风格受限，如全是二次元风格，没有适合游戏的风格，需要自己炼丹。
缺乏叙事性，画出来的多是美少女看镜头，无法当作 icon 使用。
已有素材有限且泛化性差，例如训练集中多为中世纪大胡子男人呆呆站着，图生图不可行。

解决方法和技巧：

尝试不同的模型和技术，如 Embedding、CKPT、Lora 等，不断优化以达到理想效果。
为引导 AI 画出特定风格和内容的图像，可专门绘制引导图，如只保留前景、只保留背景、全图等，并在 Caption 里打组。
针对训练集中人物朝向固定的问题，进行镜像处理。
丰富训练集，对于缺乏的建筑、风景、完整图像等，先进行短时间训练生成类似画风的图像，再放回训练集。
进行正则化处理。
对于复杂的图，可先使用底模生成，再用 ControlNet 加上微调模型出新图。

此外，在学习 AI 绘画过程中，发现其与传统设计手段结合，如用 Midjourney 生成线稿，PS 修正错误，再用 ControlNet 控制，Stable Diffusion 上色，能快速生成效果惊艳的图。例如生成可爱猫卡通 IP 角色的线稿时，可使用特定的 mj 关键词。对于没有阴影容易飘的图，可手动在 PS 中绘制阴影。

内容由 AI 大模型生成，请仔细甄别（powered by aily）

参考资料

AI辅助在独立游戏开发中的“踩坑”经验——《玩具帝国》

[title]AI辅助在独立游戏开发中的“踩坑”经验——《玩具帝国》[heading2]二、AI绘画游戏里的科技树图标实在太多了，根本画不过来……在没有AI画画之前，我都不敢想啥时候能把这些玩意填完。AI画画出来之后，我抱着满腔热情去试，结果发现三个严重的问题：•全TM在画二次元，没有适合的风格，想用到游戏里必须自己炼丹。•画出来的画好多都是美少女看镜头，没有叙事性，没法当icon用。•已有素材几乎全是中世纪大胡子男人呆呆站着，图生图不可行，训练出来的泛化性也很差。一开始的规划是：•画出卡通简笔画风格。•资产条件：有98张人像和8张UI，且人像全是男人。•需要能产出带有该画风的具有一定叙事内容的图像，内容形式一定要多元。我尝试了最开始的Embedding：后来换成CKPT（画和训练集里接近的小人已经不错了，但泛化性还是不理想）：然后是Lora（好！很接近了！）：现在这个版本画人画物画事都很完美了，甚至能从全是大胡子男人的训练集里学会画女人：从中世纪里摘出摩托车：为了引导AI画出前景后景区分明显的画，还专门画了一组引导图。分别是只保留前景、只保留背景、全图共三张图，在Caption里打组：由于训练集中人物朝向太固定，此处额外做了镜像处理。

AI辅助在独立游戏开发中的“踩坑”经验——《玩具帝国》

[title]AI辅助在独立游戏开发中的“踩坑”经验——《玩具帝国》[heading2]二、AI绘画由于训练集缺乏建筑、风景、完整图像，为了丰富训练集，我先进行一次时间较短的训练，并用得到的模型生成与目标画风类似的建筑、风景图像，再将这些图片放回训练集。还做了正则化：模型出来之后，也不是说生了图就能直接用，像一些比较复杂的图，我的方案是先去掉我的微调模型用底模生一张图，然后用ControlNet加上我的微调模型出新图。下面从左到右就是：底模+微调，底模，底模+微调+ControlNet。最后效果不错：而且这个模型在美术做设计参考的时候也能用：

教程：线稿上色Midjourney+Stable Diffusion

mj关键词：Black and white line drawing illustration of a cute cat cartoon IP character,black line sketch,wearing a fortune hat,wearing a collar around the neck,Carrying a huge bag containing scrolls and ingots,matching rope and straps at his wrists,Chinese element style,popular toys,blind box toys,Disney style,white background --niji 5 --style expressive[heading3]2、ps手动手动重绘错误的地方[content]有些图出来没有阴影容易飘，可以自己画一个出来