Stable Diffusion 使用指南
一、模型与资源推荐
常用模型网站
模型推荐
| 模型名称 |
适用场景 |
| DreamShaper Majic / 麦橘 MERJIC 系列 |
写实风格 |
| PrimeMix |
二次元类大模型 |
| ArchitectureRealMix |
建筑类大模型 |
| majicMIX realistic v7 |
写实人像 |
提示词资源
二、提示词工程
核心概念
- 提示词(Prompt):图像生成的关键,逻辑是描述的越清楚越准确
- 反向词(Negative Prompt):图像生成的规避项
- 反推理提示词:WD 1.4 提示词,上传图片可以反推提示词
反向提示词常用词
1 2
| low quality, worst quality, watermark, NSFW, bad anatomy, bad proportions, out of focus, lowres, blurry
|
majicMIX realistic v7 推荐提示词
负面提示词:
1
| (worst quality:2),(low quality:2),(normal quality:2),lowres,watermark
|
正面提示词:
提示词技巧
- 直接输入中文:输入框可以直接输入中文,然后点击翻译按钮
- 预设提示词:
- 去 Liblib 找图片模板复制提示词
- 添加进去按两次保存然后关闭
- 选择对应的预设,点击预设提示词图标就应用
- 语法技巧:
[one girl|cat] — “|” 将两者融合(部分模型不支持)
[blue hair:red hair:13] — 在第 13 步数时停止 blue hair 的渲染,然后渲染 red hair,达到融合效果
三、参数设置
采样器(Sampler)推荐
早期采样器
- Euler ⭐ 偏稳定
- Euler a ⭐ 多一点随机
- DDIM、PLMS、Heun、LMS、LMS Karras
DPM 系列采样器
二代算法:
- DPM2、DPM2A、DPM2 Karras、DPM2 a Karras
一代算法(速度快一倍左右,叠加步数效率媲美二代):
- DPM++SDE、DPM++SDE Karras
- DPM++2S a、DPM++2M、DPM++2M SDE、DPM++2M Karras(很少步数就有清晰图像)
- DPM++2M SDE Karras(不收敛,很少步数就有清晰图像)
- DPM++2M SDE heun、DPM++2M SDE Heun Karras
- DPM++2M SDE Heun Exponential、DPM++2M SDE Exponential
2023 采样器(10 步以内生成不错图像):
- DPM++3M SDE、DPM++3M SDE Karras、DPM++3M SDE Exponential
其他:
- DPM Fast、DPM Adaptive(不受步数限制,自己根据图形渲染)
- UniPC、Restart
采样器推荐总结
| 需求 |
推荐采样器 |
| 稳定性 |
DPM++2M、Euler a、DPM++2M SDE |
| 快速出图 |
DPM++2M Karras、DPM++2M SDE Karras |
| 极少步数 |
DPM++3M SDE |
| 灵活控制 |
DPM Adaptive |
迭代步数(Steps)
- 推荐值:20-40
- 数值越大,越能解决提示词的描述
- Hires steps 推荐 15+
图片尺寸
- 当模型基于 512×512 训练时,非正方形图片可能存在畸变
- 宽高也不能太大
- 修复方法:
批处理方式
| 方式 |
说明 |
推荐 |
| 总批次数 |
一张一张生成,直至 N 张完成 |
⭐ 推荐 |
| 单批数量 |
一次性跑 N 张,速度慢 |
- |
四、majicMIX realistic v7 推荐参数
1 2 3 4 5 6
| Sampler: Euler a, Euler, restart Steps: 20~40 Hires upscaler: ESRGAN4x / 4x-UltraSharp / 8x_NMKD-Superscale_150000_G Hires upscale: 2+ Hires steps: 15+ Hires denoising strength: 0.05~0.5
|
注意:不要开脸部修复
在线生图:freemake.cc
五、配音与语音合成
工具推荐
音色设定示例
良(1.5 倍速):
1 2 3 4 5
| 29 岁中国成熟女性,职业车评主持人,女声,御姐音, 声线偏浑厚但不低沉到沙哑,吐字清晰,放松发声, 有说服力。语速约 1.5 倍速,情绪随台词轻微起伏, 整体冷静、克制、有距离感,带一点强势收尾的气场, 不要嘶吼,不要夸张带货感。
|
优(2 倍速):
1 2 3 4 5
| 29 岁中国成熟女性,职业车评主持人,女声,御姐音, 声线偏浑厚但不低沉到沙哑,吐字清晰,放松发声, 有说服力。语速约 2 倍速,情绪随台词轻微起伏, 整体冷静、克制、有距离感,带一点强势收尾的气场, 不要嘶吼,不要夸张带货感。
|
台词示例
1 2 3 4 5
| 那么全新坦克300今天就看完了,各位自由的灵魂给打多少分呢 总结一句话啊,ZT汽柴全动力全域辅助驾驶上车,整车增大更狂野,拓展玩法多到炸 怀自由之心,有自由之资,万里山河皆可达 那我们这期的视频就结束了,感谢大家收看这期的《1起来电》 我是野生一一,我们下期再见。
|
六、数字人生成流程
- 准备素材:现有一个现实场景的人物图片,或从对应网站应用数字人模板,或自定义
- 创建素材库:AI 多视图生成(生成角色前、侧、背面的视觉图片)
- 生成视频:让 AI 根据素材库并配上文本片段,生成视频
- 配音:给视频配音,得到音频
- 唇形同步:将音频与视频对嘴型结合,可以用 HeyGen 或即梦等工具
七、短剧/漫剧制作
制作流程
- 角色统一:基于生成的数字人,保持角色的统一性,让它在片段中充当特定角色
- 提示词生成:从 Liblib 中找角色提示词生成新的图
- 多视图生成:使用豆包扩图,然后生成正面图、侧面图、背景图、三视图
动作迁移
八、工作流总结
1
| 提示词工程 → 模型选择 → 参数设置 → 图片生成 → 高清修复 → 数字人/动画 → 配音 → 剪辑
|
关键工具链
- 模型下载:Liblib AI、Civitai、HuggingFace
- 提示词优化:Promlib、WD 1.4 反推
- 图像生成:WebUI、在线平台
- 高清放大:ESRGAN、UltraSharp
- 数字人:HeyGen、即梦
- 语音合成:Qwen3-TTS
- 动作迁移:Wan2.2 Animate
- 视频剪辑:Final Cut / Premiere