Navigate to WaytoAGI Wiki →
Home/Question List/Question Detail

sd

Answer

以下是关于 SD（Stable Diffusion）的相关信息：

  • AIGC 中的 SD 是 Stable Diffusion 的简称。它是由初创公司 StabilityAI、CompVis 与 Runway 合作开发，于 2022 年发布的深度学习文本到图像生成模型，主要用于根据文本描述产生详细图像，是一种扩散模型（diffusion model）的变体，叫做“潜在扩散模型”（latent diffusion model;LDM）。其代码模型权重已公开发布，当前版本为 2.1 稳定版（2022.12.7），源代码库为 github.com/Stability-AI/stablediffusion。
  • 在使用 SD 进行图片生成时，如制作专属 AI 二维码，需要下载两个 SD 的 ControlNET 模型和一个预处理器。二维码做好后进入 SD 版块，相关文件需放置在特定路径下。例如，在【QR ControlNET】的文件夹中，后缀为【.yaml】的放在“……\sd-webui-aki-v4.2\extensions\sd-webui-controlnet\models”这个路径下，后缀为【.safetensors】的放在“……\sd-webui-aki-v4.2\models\ControlNet”这个路径下。同时，在生成过程中，关键词非常重要，还需设置迭代步数、采样和图像大小等参数。
  • 对于不熟悉 SD 的小伙伴，可以查看入门教程：工具教程：Stable Diffusion。在 SD 绘画学社中，无论绘画新手还是资深画匠，都能一同探索 SD 绘画的无限可能。
Content generated by AI large model, please carefully verify (powered by aily)

References

AIGC常见名词解释（字典篇）

AIGC：AI generated content，又称为生成式AI，意为人工智能生成内容。例如AI文本续写，文字转图像的AI图、AI主持人等，都属于AIGC的应用。类似的名词缩写还有UGC（普通用户生产），PGC（专业用户生产）等。能进行AIGC的产品项目也很多，能进行AIGC的媒介也很多包括且不限于语言文字类：OpenAI的GPT，Google的Bard，百度的文心一言，还有一种国内大佬下场要做的的LLM都是语言类的。语音声音类：Google的WaveNet，微软的Deep Nerual Network，百度的DeepSpeech等，还有合成AI孙燕姿大火的开源模型Sovits。图片美术类：早期有GEN等图片识别/生成技术，去年大热的扩散模型又带火了我们比较熟悉的、生成质量无敌的Midjourney，先驱者谷歌的Disco Diffusion，一直在排队测试的OpenAI的Dalle·2，以及stability ai和runaway共同推出的Stable Diffusion...[heading1]SD是什么？[content]SD是Stable Diffusion的简称。是它是由初创公司StabilityAI、CompVis与Runway合作开发，2022年发布的深度学习文本到图像生成模型。它主要用于根据文本的描述产生详细图像。Stable Diffusion是一种扩散模型（diffusion model）的变体，叫做“潜在扩散模型”（latent diffusion model;LDM）。SD的代码模型权重已公开发布，可以在大多数配备有适度GPU的电脑硬件上运行。当前版本为2.1稳定版（2022.12.7）。源代码库：github.com/Stability-AI/stablediffusion我们可以通过一系列的工具搭建准备，使用SD进行想要的图片aigc（心想事成的魔法施与）。

【SD】今天就学会！专属AI二维码订制

二维码做好之后，我们进入SD的版块，需要下载两个SD的ControlNET模型和一个预处理器，我已经打包好了，可以添加我的公众号【白马与少年】，回复【SD】就发给你。在【QR ControlNET】的文件夹中，后缀为【.yaml】的放在“……\sd-webui-aki-v4.2\extensions\sd-webui-controlnet\models”这个路径下，后缀为【.safetensors】的放在“……\sd-webui-aki-v4.2\models\ControlNet”这个路径下。我这边随便选择一个“cheeseDaddys”的模型，填入一段描绘梦幻森林的关键词。在这个美化二维码的过程中，关键词是非常重要的。接着，我们把迭代步数(Steps)设置到15，采样选择DPM++2M Karras，图像大小设置到768*768。

SD绘画学社

在这里，我们携手步入艺术与科技交织的梦幻领域，一同解锁SD（Stable Diffusion）AI绘画的无限可能。不论您是绘画新手，渴望在数字画布上初次挥洒创意；还是资深画匠，寻求在技术洪流中激发新灵感，希望这里会是你的理想栖息地。【不熟悉SD的小伙伴可以先看下面的入门教程】[工具教程：Stable Diffusion](https://waytoagi.feishu.cn/wiki/FUQAwxfH9iXqC9k02nYcDobonkf?from=from_copylink)[heading1]

Others are asking
sd
以下是关于 SD（Stable Diffusion）的相关信息： AIGC 中的 SD 是 Stable Diffusion 的简称。它是由初创公司 StabilityAI、CompVis 与 Runway 合作开发，于 2022 年发布的深度学习文本到图像生成模型，主要用于根据文本描述产生详细图像，是一种扩散模型（diffusion model）的变体，叫做“潜在扩散模型”（latent diffusion model;LDM）。其代码模型权重已公开发布，当前版本为 2.1 稳定版（2022.12.7），源代码库为 github.com/StabilityAI/stablediffusion。 在使用 SD 进行图片生成时，如制作专属 AI 二维码，需要下载两个 SD 的 ControlNET 模型和一个预处理器。二维码做好后进入 SD 版块，相关文件需放置在特定路径下。例如，在【QR ControlNET】的文件夹中，后缀为【.yaml】的放在“……\\sdwebuiakiv4.2\\extensions\\sdwebuicontrolnet\\models”这个路径下，后缀为【.safetensors】的放在“……\\sdwebuiakiv4.2\\models\\ControlNet”这个路径下。同时，在生成过程中，关键词非常重要，还需设置迭代步数、采样和图像大小等参数。 对于不熟悉 SD 的小伙伴，可以查看入门教程：。在 SD 绘画学社中，无论绘画新手还是资深画匠，都能一同探索 SD 绘画的无限可能。
2025-02-18
开源模型的MIT模式、Apache、GPL、BSD模式的模型案例有哪些？
目前开源模型的 MIT 模式、Apache、GPL、BSD 模式的具体案例众多且不断更新。MIT 模式的开源模型如 TensorFlow Lite；Apache 模式的有 MXNet；GPL 模式的像 Gnuplot；BSD 模式的例如 OpenCV 等。但请注意，这只是其中的一部分，实际情况可能会有所变化。
2025-02-14
开源模型的MIT模式、Apache、GPL、BSD模式的定义和区别
MIT 模式：这是一种相对宽松的开源许可模式。允许使用者对软件进行修改、再发布，并且几乎没有限制，只要求在再发布时保留原版权声明和许可声明。 Apache 模式：提供了较为宽松的使用条件，允许修改和再发布代码，但要求在修改后的文件中明确注明修改信息。同时，还包含一些专利相关的条款。 GPL 模式：具有较强的传染性和约束性。如果基于 GPL 许可的代码进行修改和再发布，修改后的代码也必须以 GPL 许可发布，以保证代码的开源性和可共享性。 BSD 模式：也是一种较为宽松的许可模式，允许使用者自由地修改和再发布代码，通常只要求保留原版权声明。 总的来说，这些开源许可模式在对使用者的限制和要求上有所不同，您在选择使用开源模型时，需要根据具体需求和项目情况来确定适合的许可模式。
2025-02-14
可以不学sd而是直接学comfyui
学习 ComfyUI 而不先学习 SD 是可行的。ComfyUI 具有一些独特的优势，例如更接近 SD 的底层工作原理，能够实现自动化工作流以消灭重复性工作，作为强大的可视化后端工具还能实现 SD 之外的功能，如调用 API 等，并且可根据定制需求开发节点或模块。 比如，有人基于 ComfyUI 中的创建了工作流，不仅能用于绿幕素材的抠图，还能自动生成定制需求的抠图素材，全程只需几秒。 在电脑硬件方面，使用 ComfyUI 时，系统要求 Windows7 以上，显卡要求 NVDIA 独立显卡且显存至少 4G 起步，硬盘需留有至少 100G 空间（包括模型）。但 mac 系统、AMD 显卡、低显卡的情况也能安装使用，只是功能不全、出错率偏高，严重影响使用体验，建议升级设备或采用云服务器。
2025-02-08
除了SD，有哪些方便快捷的网站可以用的？
以下是一些方便快捷的 AI 相关网站： 1. 吐司：https://tusiart.com/images/635511733697550450?post_id=635512498197535244&source_id=nzywoVHilkK7o_cqaH31xAh 2. 哩布：https://www.liblib.ai/ 3. 哩布哩布 AI：其在线 SD 界面和本地部署界面区别不大，每天有一百次生成次数，且已集成最新的 SDXL 模型。 4. Clipdrop：https://clipdrop.co/stablediffusion ，和 midjourney 的使用方法相似，每天免费 400 张图片，需排队，出四张图约二三十秒。 此外，还有一些 AI 视频相关的网站： 1. SVD：https://stablevideo.com/ ，对于景观更好用。 2. Morph Studio：https://app.morphstudio.com/ ，还在内测。 3. Heygen：https://www.heygen.com/ ，数字人/对口型。 4. Kaiber：https://kaiber.ai/ 5. Moonvalley：https://moonvalley.ai/ 6. Mootion：https://discord.gg/AapmuVJqxx ，3d 人物动作转视频。 7. 美图旗下：https://www.miraclevision.com/ 8. Neverends：https://neverends.life/create ，操作傻瓜。 9. Leiapix：https://www.leiapix.com/ ，可以把一张照片转动态。 10. Krea：https://www.krea.ai/ 11. Opusclip：https://www.opus.pro/ ，利用长视频剪成短视频。 12. Raskai：https://zh.rask.ai/ ，短视频素材直接翻译至多语种。 13. invideoAI：https://invideo.io/make/aivideogenerator/ ，输入想法>自动生成脚本和分镜描述>生成视频>人工二编>合成长视频。 14. descript：https://www.descript.com/?ref=feizhuke.com 15. veed.io：https://www.veed.io/ ，自动翻译自动字幕。 16. clipchamp：https://app.clipchamp.com/ 17. typeframes：https://www.revid.ai/?ref=aibot.cn
2025-02-04
SD曝显存
在使用 SD 进行超大尺寸绘制时，直接调分辨率绘制超高分辨率的图片（如 10000x768 的清明上河图）通常会爆显存。正常尺寸设置最高到 2048，无法直接设置 10000 的宽度。解决方法是先在 PS 中设置所需尺寸的画布并保存为 jpg 图片，然后将图片放入 ControlNet 中，点击右下角箭头将尺寸信息发送到生成设置，填入正反向提示词，并启用 Tiled Diffusion 插件（方案选择 Mixture of Diffusers）防止接缝产生。 在 ComfyUI 中，模型的安装部署方面，FLUX 模型建议选择 dev 版本，显卡可以的用 fp16，显卡不够用的选 fp8，模型下载后放入 ComfyUI/models/unet/文件夹中。若爆显存，“UNET 加载器”节点中的 weight_dtype 可设置为 fp8 降低显存使用量，但可能稍降质量。clip 模型（t5xxl_fp16.safetensors 和 clip_l.safetensors）放在 ComfyUI/models/clip/文件夹，也可用 t5xxl_fp8_e4m3fn.safetensors 降低内存使用率。Vae 模型下载后放入 ComfyUI/models/vae 文件夹。 在生成过程中，ComfyUI 处理 SDXL 模型比 webUI 更有效率。例如，ComfyUI 生成过程中显存占用率为 7 9GB，每次生成耗时 13 15s；webUI 显存占用率为 8 11GB，每次生成耗时 25s。此外，还可对 SDXL 进行风格控制，添加【新建节点】【实用工具】【SDXL Promot Styler Advanced】节点，通过右键增加输入点将文本提示词赋予 base 和 refiner 并切换风格。
2025-02-02