Stable Diffusion 3.5 实战教程 2026:本地部署 + 进阶技巧(含 ControlNet / LoRA 完整指南)
Stable Diffusion 3.5 是 2026 年最值得本地部署的 AI 绘图模型——开源、免费、无限制、可商用。本文从硬件选购、软件安装、模型下载到 ControlNet / LoRA 进阶玩法,手把手带你成为 SD 玩家。
一、为什么 2026 年还选 SD 3.5
虽然 Midjourney V8 画质更强,但 SD 3.5 的核心优势是可控性 + 免费 + 私密:
- 完全免费:模型权重、ControlNet、LoRA 全部开源,无月费
- 无限制生成:不限制次数 / 不限制内容(除非法令)
- 可商用:基于 SD 3.5 生成的图,自己拥有版权
- 本地运行:数据不出本地,隐私可控
- 高度可定制:LoRA / ControlNet / IPAdapter 等生态丰富
- 画质接近 V7:SD 3.5 写实类已接近 Midjourney V7 水平
对个人创作者:一次硬件投入(5000-10000 元显卡),永久免费使用。
二、硬件选购指南
1. 最低配置(能跑)
- 显卡:NVIDIA GTX 1660 6GB(约 1500 元)
- 内存:16GB
- 硬盘:SSD 100GB(模型 + 系统)
- 出图速度:512×768 大约 30 秒/张
2. 推荐配置(甜点)
- 显卡:NVIDIA RTX 4060 Ti 16GB(约 3500 元)
- 内存:32GB
- 硬盘:SSD 500GB
- 出图速度:1024×1024 约 5 秒/张
3. 性能怪兽(专业)
- 显卡:NVIDIA RTX 4090 24GB(约 16000 元)
- 内存:64GB
- 硬盘:NVMe SSD 1TB
- 出图速度:1024×1024 约 1.5 秒/张
2026 年推荐 RTX 4060 Ti 16GB——性价比最高,能跑 90% 的 SD 模型 + ControlNet + LoRA。Mac 用户 M2/M3/M4 Ultra 也能跑,但速度慢 30-50%。
三、软件安装(10 分钟)
1. 推荐 ComfyUI(2026 年主流)
ComfyUI 是节点式 UI,比老牌的 Automatic1111 WebUI 更直观、更快、扩展更多。2026 年 90% 的 SD 玩家已迁移到 ComfyUI。
2. 安装步骤(Windows)
- 安装 Python 3.10+(python.org)
- 安装 Git(git-scm.com)
- 克隆 ComfyUI:
git clone https://github.com/comfyanonymous/ComfyUI.git - 进入目录:
cd ComfyUI - 安装依赖:
pip install -r requirements.txt - 下载模型到
models/checkpoints/ - 启动:
python main.py - 浏览器打开
http://127.0.0.1:8188
3. Mac 用户
ComfyUI 在 Mac 上也能跑:
- 用 homebrew 装 Python:
brew install python@3.11 - 克隆 ComfyUI,
pip install -r requirements.txt - 启动:
python main.py --force-fp32(Mac 用 fp32 跑得更快)
四、模型下载(重要)
1. 基础模型(必下)
| 模型 | 大小 | 风格 | 下载 |
|---|---|---|---|
| SD 3.5 Large | 6.5GB | 写实 / 通用 | HuggingFace |
| SD 3.5 Large Turbo | 6.5GB | 快速出图 | 同上 |
| SD 3.5 Medium | 4.2GB | 省显存 | 同上 |
| Flux.1 Dev | 12GB | 写实天花板 | HuggingFace |
推荐 SD 3.5 Large + Flux.1 Dev 双持——前者快,后者精。
2. 模型下载加速
HuggingFace 国内经常连不上。用镜像:
- 设置环境变量:
export HF_ENDPOINT=https://hf-mirror.com(Mac/Linux) - 或用 hf-mirror.com 直接下载
五、3 个必学进阶功能
1. ControlNet(精准控图)
ControlNet 是 SD 的灵魂扩展——用一张参考图(线稿 / 姿态 / 深度)控制 AI 出图。2026 年主流 ControlNet 模型:
- Canny:线稿控制(最常用)
- OpenPose:人体姿态控制(漫画 / 角色设计)
- Depth:深度图控制(3D 感场景)
- Tile:细节放大(高清修复)
- IPAdapter:图像风格迁移
下载 ControlNet 模型到 models/controlnet/,在 ComfyUI 里加载使用。
2. LoRA(风格 / 角色定制)
LoRA(Low-Rank Adaptation)是轻量微调模型——只改 1-10% 的参数就能学会特定风格 / 角色 / 概念。2026 年 CivitAI 上有 50 万+ LoRA 可下载。
热门 LoRA 分类:
- 角色 LoRA:特定动漫 / 游戏 / 电影角色(注意版权)
- 画风 LoRA:油画 / 水彩 / 赛博朋克 / 国风
- 概念 LoRA:特定物体 / 场景 / 服饰
- 真人 LoRA:特定人物(必须用自己照片)
下载 LoRA 到 models/loras/,ComfyUI 里通过 Load LoRA 节点加载。
3. 高清修复(Hires Fix)
SD 默认出图 1024×1024,想要 4K 高清?两步法:
- 先生成 1024×1024 草图
- 用 SD Upscale 节点放大 4 倍(到 4096×4096)
- 用 ControlNet Tile 节点修复放大后的细节
整个流程在 ComfyUI 里 5 个节点搞定,比 Automatic1111 简单 3 倍。
六、5 个实战 prompt 模板
1. 写实人像
正向:RAW photo of a young Chinese woman, natural skin texture, freckles, golden hour lighting, shot on Sony A7IV, 85mm f/1.4, bokeh background, peaceful smile, photorealistic, 8k uhd, high quality, film grain
反向:cartoon, anime, 3d, painting, illustration, deformed, ugly, blurry, low quality, watermark
2. 国风插画
正向:ancient Chinese palace maiden, hanfu, hairpin, fan, palace background, jacaranda tree, dreamy atmosphere, ink wash painting style, traditional Chinese art, masterpiece, detailed
反向:photo, 3d, modern, western style
3. 赛博朋克场景
正向:cyberpunk city street at night, neon signs in Chinese and Japanese, flying cars, rain reflections, futuristic, Blade Runner style, cinematic lighting, ultra detailed, 8k
反向:daytime, rural, low contrast, blurry
4. 产品图
正向:luxury perfume bottle, glass with golden cap, on marble table, soft studio lighting, water droplets, ultra realistic product photography, 8k, sharp focus
反向:people, hand, low quality, deformed, watermark
5. 二次元角色
正向:anime girl, silver hair, red eyes, school uniform, cherry blossoms, soft lighting, detailed face, makoto shinkai style, 4k, masterpiece
反向:realistic, photo, 3d, deformed, bad anatomy
剩下 25 个模板(电商 / 海报 / UI / 漫画 / 头像 / 壁纸 / 表情包)整理在 AI 提示词库。
七、SD 3.5 vs Midjourney V8 怎么选
| 维度 | SD 3.5 | Midjourney V8 |
|---|---|---|
| 月费 | $0(一次硬件投入) | $10-30/月 |
| 画质 | ★★★★(写实接近 V8) | ★★★★★ |
| 可控性 | ★★★★★(ControlNet/LoRA) | ★★★ |
| 上手难度 | ★★★★(需学习) | ★★(开箱即用) |
| 出图速度 | ★★★★(本地硬件决定) | ★★★★(云端) |
| 商用版权 | ★★★★★(完全拥有) | ★★★★(月费不能断) |
详细对比见 AI 模型对比专题。
八、避坑指南
1. 模型版权
SD 3.5 基础模型 Apache 2.0 协议,可商用。但第三方 LoRA 协议不一,下载前看仔细:
- CivitAI 上的 LoRA 部分是"仅供学习"
- Stable Diffusion 官方 LoRA(社区版)大多可商用
2. 显存爆掉
出图时 OOM(Out of Memory)?
- 出图尺寸降到 512×768
- 关闭 VAE Tiling(ComfyUI 里取消勾选)
- 用 fp16 模型(不要 fp32)
- ControlNet 用低显存版本(
*-fp16.safetensors)
3. 黑色图片 / 噪点图
通常是 VAE 没装 / 模型加载错。ComfyUI 里加 Load VAE 节点(推荐 vae-ft-mse-840000)。
九、工作流模板(生产级)
1. 商业项目标准流程
- 需求分析:用 AI 提示词工程 写创意 brief
- 素材准备:用 ComfyUI 出 50+ 张草图(5 种风格 × 10 张)
- 客户确认风格 → 选定方向
- 用 ControlNet 控形(保证构图)
- 用 LoRA 加细节风格
- 高清修复 4K 出图
- 用 图片工具 压缩到交付尺寸
2. 电商素材批量生产
- 产品照片 → IPAdapter 提取风格
- ComfyUI 批处理节点:一次出 20 张
- 脚本化改名 / 压缩 / 加水印
- 每天 200 张电商主图不再是梦
十、写在最后
SD 3.5 是 2026 年开源 AI 的代表作——一次性硬件投入,永久免费商用,可控性远超任何云端服务。如果你打算长期做 AI 创作,买一张 RTX 4060 Ti 16GB 是最划算的投资。
想看更多 AI 绘图 / 视频 / 编程 / 写作工具?7027A AI 工具库 收录 400+ 工具,按 8 大场景分类,每个工具附官网直达和深度评测。
想看更多 AI 工具对比?AI 模型对比专题 有详细拆解。