Stable Diffusion 3.5 实战教程 2026:本地部署 + 进阶技巧(含 ControlNet / LoRA 完整指南)

Stable Diffusion 3.5 实战教程 2026:本地部署 + 进阶技巧(含 ControlNet / LoRA 完整指南)

Stable Diffusion 3.5 是 2026 年最值得本地部署的 AI 绘图模型——开源、免费、无限制、可商用。本文从硬件选购、软件安装、模型下载到 ControlNet / LoRA 进阶玩法,手把手带你成为 SD 玩家。

一、为什么 2026 年还选 SD 3.5

虽然 Midjourney V8 画质更强,但 SD 3.5 的核心优势是可控性 + 免费 + 私密

  • 完全免费:模型权重、ControlNet、LoRA 全部开源,无月费
  • 无限制生成:不限制次数 / 不限制内容(除非法令)
  • 可商用:基于 SD 3.5 生成的图,自己拥有版权
  • 本地运行:数据不出本地,隐私可控
  • 高度可定制:LoRA / ControlNet / IPAdapter 等生态丰富
  • 画质接近 V7:SD 3.5 写实类已接近 Midjourney V7 水平

对个人创作者:一次硬件投入(5000-10000 元显卡),永久免费使用

二、硬件选购指南

1. 最低配置(能跑)

  • 显卡:NVIDIA GTX 1660 6GB(约 1500 元)
  • 内存:16GB
  • 硬盘:SSD 100GB(模型 + 系统)
  • 出图速度:512×768 大约 30 秒/张

2. 推荐配置(甜点)

  • 显卡:NVIDIA RTX 4060 Ti 16GB(约 3500 元)
  • 内存:32GB
  • 硬盘:SSD 500GB
  • 出图速度:1024×1024 约 5 秒/张

3. 性能怪兽(专业)

  • 显卡:NVIDIA RTX 4090 24GB(约 16000 元)
  • 内存:64GB
  • 硬盘:NVMe SSD 1TB
  • 出图速度:1024×1024 约 1.5 秒/张

2026 年推荐 RTX 4060 Ti 16GB——性价比最高,能跑 90% 的 SD 模型 + ControlNet + LoRA。Mac 用户 M2/M3/M4 Ultra 也能跑,但速度慢 30-50%。

三、软件安装(10 分钟)

1. 推荐 ComfyUI(2026 年主流)

ComfyUI 是节点式 UI,比老牌的 Automatic1111 WebUI 更直观、更快、扩展更多。2026 年 90% 的 SD 玩家已迁移到 ComfyUI。

2. 安装步骤(Windows)

  1. 安装 Python 3.10+(python.org
  2. 安装 Git(git-scm.com
  3. 克隆 ComfyUI:git clone https://github.com/comfyanonymous/ComfyUI.git
  4. 进入目录:cd ComfyUI
  5. 安装依赖:pip install -r requirements.txt
  6. 下载模型到 models/checkpoints/
  7. 启动:python main.py
  8. 浏览器打开 http://127.0.0.1:8188

3. Mac 用户

ComfyUI 在 Mac 上也能跑:

  1. 用 homebrew 装 Python:brew install python@3.11
  2. 克隆 ComfyUI,pip install -r requirements.txt
  3. 启动:python main.py --force-fp32(Mac 用 fp32 跑得更快)

四、模型下载(重要)

1. 基础模型(必下)

模型大小风格下载
SD 3.5 Large6.5GB写实 / 通用HuggingFace
SD 3.5 Large Turbo6.5GB快速出图同上
SD 3.5 Medium4.2GB省显存同上
Flux.1 Dev12GB写实天花板HuggingFace

推荐 SD 3.5 Large + Flux.1 Dev 双持——前者快,后者精。

2. 模型下载加速

HuggingFace 国内经常连不上。用镜像:

  • 设置环境变量:export HF_ENDPOINT=https://hf-mirror.com(Mac/Linux)
  • 或用 hf-mirror.com 直接下载

五、3 个必学进阶功能

1. ControlNet(精准控图)

ControlNet 是 SD 的灵魂扩展——用一张参考图(线稿 / 姿态 / 深度)控制 AI 出图。2026 年主流 ControlNet 模型:

  • Canny:线稿控制(最常用)
  • OpenPose:人体姿态控制(漫画 / 角色设计)
  • Depth:深度图控制(3D 感场景)
  • Tile:细节放大(高清修复)
  • IPAdapter:图像风格迁移

下载 ControlNet 模型到 models/controlnet/,在 ComfyUI 里加载使用。

2. LoRA(风格 / 角色定制)

LoRA(Low-Rank Adaptation)是轻量微调模型——只改 1-10% 的参数就能学会特定风格 / 角色 / 概念。2026 年 CivitAI 上有 50 万+ LoRA 可下载。

热门 LoRA 分类:

  • 角色 LoRA:特定动漫 / 游戏 / 电影角色(注意版权)
  • 画风 LoRA:油画 / 水彩 / 赛博朋克 / 国风
  • 概念 LoRA:特定物体 / 场景 / 服饰
  • 真人 LoRA:特定人物(必须用自己照片)

下载 LoRA 到 models/loras/,ComfyUI 里通过 Load LoRA 节点加载。

3. 高清修复(Hires Fix)

SD 默认出图 1024×1024,想要 4K 高清?两步法:

  1. 先生成 1024×1024 草图
  2. 用 SD Upscale 节点放大 4 倍(到 4096×4096)
  3. 用 ControlNet Tile 节点修复放大后的细节

整个流程在 ComfyUI 里 5 个节点搞定,比 Automatic1111 简单 3 倍。

六、5 个实战 prompt 模板

1. 写实人像

正向:RAW photo of a young Chinese woman, natural skin texture, freckles, golden hour lighting, shot on Sony A7IV, 85mm f/1.4, bokeh background, peaceful smile, photorealistic, 8k uhd, high quality, film grain

反向:cartoon, anime, 3d, painting, illustration, deformed, ugly, blurry, low quality, watermark

2. 国风插画

正向:ancient Chinese palace maiden, hanfu, hairpin, fan, palace background, jacaranda tree, dreamy atmosphere, ink wash painting style, traditional Chinese art, masterpiece, detailed

反向:photo, 3d, modern, western style

3. 赛博朋克场景

正向:cyberpunk city street at night, neon signs in Chinese and Japanese, flying cars, rain reflections, futuristic, Blade Runner style, cinematic lighting, ultra detailed, 8k

反向:daytime, rural, low contrast, blurry

4. 产品图

正向:luxury perfume bottle, glass with golden cap, on marble table, soft studio lighting, water droplets, ultra realistic product photography, 8k, sharp focus

反向:people, hand, low quality, deformed, watermark

5. 二次元角色

正向:anime girl, silver hair, red eyes, school uniform, cherry blossoms, soft lighting, detailed face, makoto shinkai style, 4k, masterpiece

反向:realistic, photo, 3d, deformed, bad anatomy

剩下 25 个模板(电商 / 海报 / UI / 漫画 / 头像 / 壁纸 / 表情包)整理在 AI 提示词库

七、SD 3.5 vs Midjourney V8 怎么选

维度SD 3.5Midjourney V8
月费$0(一次硬件投入)$10-30/月
画质★★★★(写实接近 V8)★★★★★
可控性★★★★★(ControlNet/LoRA)★★★
上手难度★★★★(需学习)★★(开箱即用)
出图速度★★★★(本地硬件决定)★★★★(云端)
商用版权★★★★★(完全拥有)★★★★(月费不能断)

详细对比见 AI 模型对比专题

八、避坑指南

1. 模型版权

SD 3.5 基础模型 Apache 2.0 协议,可商用。但第三方 LoRA 协议不一,下载前看仔细:

  • CivitAI 上的 LoRA 部分是"仅供学习"
  • Stable Diffusion 官方 LoRA(社区版)大多可商用

2. 显存爆掉

出图时 OOM(Out of Memory)?

  • 出图尺寸降到 512×768
  • 关闭 VAE Tiling(ComfyUI 里取消勾选)
  • 用 fp16 模型(不要 fp32)
  • ControlNet 用低显存版本(*-fp16.safetensors

3. 黑色图片 / 噪点图

通常是 VAE 没装 / 模型加载错。ComfyUI 里加 Load VAE 节点(推荐 vae-ft-mse-840000)。

九、工作流模板(生产级)

1. 商业项目标准流程

  1. 需求分析:用 AI 提示词工程 写创意 brief
  2. 素材准备:用 ComfyUI 出 50+ 张草图(5 种风格 × 10 张)
  3. 客户确认风格 → 选定方向
  4. 用 ControlNet 控形(保证构图)
  5. 用 LoRA 加细节风格
  6. 高清修复 4K 出图
  7. 图片工具 压缩到交付尺寸

2. 电商素材批量生产

  1. 产品照片 → IPAdapter 提取风格
  2. ComfyUI 批处理节点:一次出 20 张
  3. 脚本化改名 / 压缩 / 加水印
  4. 每天 200 张电商主图不再是梦

十、写在最后

SD 3.5 是 2026 年开源 AI 的代表作——一次性硬件投入,永久免费商用,可控性远超任何云端服务。如果你打算长期做 AI 创作,买一张 RTX 4060 Ti 16GB 是最划算的投资。

想看更多 AI 绘图 / 视频 / 编程 / 写作工具?7027A AI 工具库 收录 400+ 工具,按 8 大场景分类,每个工具附官网直达和深度评测。

想看更多 AI 工具对比?AI 模型对比专题 有详细拆解。

🛠 本文提到的 AI 工具

C
ChatGPT 通用 AI 助手与多模态创作
访问 →
C
Claude Anthropic Claude 对话、写作和智能协作入口
访问 →
G
Gemini Google Gemini 官方 AI 助手入口
访问 →
D
DeepSeek 中文推理、写作、代码问答
访问 →

📚 相关文章

2026 Devin 2.0 完整使用指南:全球首个 AI 软件工程师,从月入 5 万到 50 万外包全流程(含 30 个实战 prompt)

2026 Devin 2.0 完整使用指南:全球首个 AI 软件工程师,含 30 个实战 prompt + 5 大变现路径(接外包 / 独立 SaaS / Chrome 插件 / 培训 / 自媒体)。

👁 1
2026 AI 视频生成工具 5 款终极对比:Sora 2 / Runway Gen-4 / Pika 3 / 可灵 2.0 / 即梦 4.0 谁最强?

2026 AI 视频生成工具 5 款终极对比:Sora 2 / Runway Gen-4 / Pika 3 / 可灵 2.0 / 即梦 4.0。含 6 大场景 + 6 个 prompt 模板 + 避坑指南。

👁 4
2026 免费 SEO 综合查询工具 7 款横评:站长之家 / 爱站 / 5118 / 优帮云 / 7027A 谁更值?

2026 免费 SEO 综合查询工具 7 款横评:站长之家 / 爱站 / 5118 / 优帮云 / 7027A 谁更值?

👁 16
Figma AI 完全使用指南 2026:设计师的 AI 神器,从原型到交付(含 20 个实战技巧)

Figma AI 完全使用指南 2026:5 大必学功能 + 20 个实战技巧 + 6 大场景。

👁 9