以下是关于在 Mac mini 本地部署 Stable Diffusion 的相关信息：
目前市面上主流的 AI 绘图软件有 Stable Diffusion 和 Midjourney。Stable Diffusion 开源免费、可本地化部署、创作自由度高，但对电脑配置尤其是显卡有要求。其工作原理涉及到一系列核心组件，如将用户输入的 Prompt 文本转化成 text embedding 的 CLIP、VAE Encoder-Decoder、进行迭代降噪和在文本引导下进行多轮预测的 UNET 等。
在环境部署方面，对于觉得麻烦的同学，可以使用整合包，解压即用。比如独立研究员的空间下经常更新整合包，秋叶的启动器也非常好用，将启动器复制到下载仓库的目录下即可，更新管理更方便。打开启动器后，可一键启动。显存优化需根据显卡实际显存选择，不要超过当前显卡显存，xFormers 能极大改善内存消耗和速度，建议开启。准备工作完毕后，点击一键启动，等待浏览器自动跳出或控制台弹出本地 URL 说明启动成功。若报错提示缺少 Pytorch，需在启动器中点击配置。Stable Diffusion webui 更新频繁，可根据需求在“版本管理”目录下更新，同时注意插件的更新。Stable Diffusion 可配置大量插件扩展，在 webui 的“扩展”选项卡下，点击“加载自”后，目录会刷新，选择需要的插件点击右侧的 install 即可安装，安装完毕后需重新启动用户界面。
关于具体的安装方法可以去看看 B 站的【秋葉 aaaki】这个 Up 主的视频。
作者：白马少年介绍：SD实践派，出品精细教程发布时间：2023-04-27 23:00原文网址：https://mp.weixin.qq.com/s/C-F6ARIMHotl6siAfQ9wig目前市面上主流的AI绘图软件有两个：Stable Diffusion和Midjourney。Stable Diffusion的优势在于开源免费、可以本地化部署、创作自由度很高，缺点是需要比较好的电脑配置，尤其是显卡；Midjourney的优势是操作简单方便，创作内容相当丰富，但是需要科学上网并且付费，目前的使用费大概在每月200多元左右。如果可以融入工作流，这个月费也不算高，毕竟它带来的效率是惊人的，当然前期想要了解玩一玩的，可以试试Stable Diffusion，关于具体的安装方法可以去看看B站的【秋葉aaaki】这个Up主的视频。很多还没有接触过AI绘画的朋友会觉得这个东西很神秘，哪怕装好了软件也会看着一堆英文和参数而一头雾水。今天我就用最傻瓜的方式来讲述一下Stable Diffusion的工作原理和基本功能。
的去噪结果。然而，这种迭代性质在计算效率上带来了挑战，特别是在处理大尺寸图像和大量扩散步骤(T)时。在采样过程中，从高斯噪声中去噪图像可能需要很长时间。为了解决这一问题，一组研究人员提出了一种新的方法，称为稳定扩散（Stable Diffusion），最初称为潜在扩散模型（Latent Diffusion Models）Stable DiffusionStable Diffusion是一种扩散模型（diffusion model）的变体，叫做“潜在扩散模[heading1]型”(Latent Diffusion Models)[content]CLIP将用户输入的Prompt文本转化成text embedding核心的组件VAE Encoder-DecoderUNETUNET进行迭代降噪，在文本引导下进行多轮预测High-Resolution Image Synthesis with Latent Diffusion ModelsComfyUI存放路径：models/checkpoints/SD1.5SD基础预训练模型SDXLSD1.5模型实例SDXL训练方法DreamBooth，by GoogleEMA-only&pruned VS FullFP16&FP32格式.pt VS.safetensorBake in VAE模型自带已适配的VAESD微调模型概念学习Checkpoint作用source：stable-diffusion-art.com/models/#How_are_models_created1puppy训练要求sd1.512G VARMSDXL16G VARMThe merged model sits between the realistic F222 and the anime Anything V3styles.It is a very good model for generating illustration art with human figures.(source:stable-diffusion-art.com/models/#Example_of_a_merged_model)融合模型checkpoint+checkpointLora+Lora形式checkpoint+LoraBaking VAE
觉得麻烦的同学可以使用整合包，解压即用。比如[独立研究员](https://link.zhihu.com/?target=https%3A//space.bilibili.com/250989068)的空间下经常更新整合包。[秋叶的启动器](https://link.zhihu.com/?target=https%3A//www.bilibili.com/video/BV1ne4y1V7QU)也非常好用，将启动器复制到下载仓库的目录下即可，更新管理会更方便。打开启动器后，可一键启动：如果有其他需求，可以在高级选项中调整配置。显存优化根据显卡实际显存选择，不要超过当前显卡显存。不过并不是指定了显存优化量就一定不会超显存，在出图时如果启动了过多的优化项（如高清修复、人脸修复、过大模型）时，依然有超出显存导致出图失败的几率。xFormers能极大地改善了内存消耗和速度，建议开启。准备工作完毕后，点击一键启动即可。等待浏览器自动跳出，或是控制台弹出本地URL后说明启动成功如果报错提示缺少Pytorch，则需要在启动器中点击配置：Stable Diffusion webui的更新比较频繁，请根据需求在“版本管理”目录下更新：同样地，也请注意插件的更新：[heading3]关于插件[content]Stable Diffusion可配置大量插件扩展，在webui的“扩展”选项卡下，可以安装插件：点击“加载自”后，目录会刷新，选择需要的插件点击右侧的install即可安装。安装完毕后，需要重新启动用户界面：