关于SDXL 1.0，这个视频里有你想知道的全部 | 15分钟全面解读，AI绘画即将迎来“新时代”？Stable Diffusion XL大模型安装及使用教程

Nenly同学:
总结一下视频里的几个核心观点： 1. 【意义】XL1.0作为基底模型的素质确实优秀，五大优势可能会非常大程度地改变我们未来的AI图像生成方式，朝着更简单、更人性化的方向持续“进化”； 2. 【作用】如果你更关心它的实用价值，那确实可以“再等等”，因为目前原生的XL出图能力不如经过反复微调的老模型给够提示词的结果，但基于XL微调的版本一定会越来越多，预计会在1-2个月以后更直接地影响到整个应用生态，但并不会“取代”老的模型和已有的操作方法。 3. 【使用】和其他大模型没俩样，记得更新WebUI。要想充分利用Refiner，搭建ComfyUI的Workflow会比图生图倒一手好用，具体以的方式我也在最后一部分详细分析了，感兴趣的朋友可以看到最后。 写脚本的时候，C站的训练大赛才刚刚拉开帷幕，现在已经有成批的利用XL微调模型可以供大家使用了，真的是一件挺让人心潮澎湃的事情。也欢迎各位已经用上了XL，或者正在用XL炼模型的大佬们一起交流讨论。 期待早日能用上更好的“新世代”模型！[热词系列_锤]

【回复】回复 @狻猊____ : 1. 估计有点吃力，现在8G的N卡都有一点吃紧 2. 提示词和参数只决定了一部分，分辨率不同、LoRA不一样、有没有用CN都可能导致不同结果 3. 推测是分辨率问题，太低的分辨率细节就是模糊的，如果有用Tiled Diffusion一类的放大处理会好很多（主页有另一期教程，可以去看一下）
【回复】NansException：所有 NaN 的张量是在 Unet 中生成的。这可能是因为没有足够的精度来表示图片，或者因为您的显卡不支持半类型。尝试在“设置”>“稳定扩散”中设置“向上转换交叉注意层为 float32”选项，或使用 --no-half 命令行参数来修复此问题。使用 --disable-nan-check 命令行参数禁用此检查 你好，请问知道这是什么原因吗
【回复】up我看了你的视频入坑了ai绘图，但有几个问题想请教你希望能回复我一下谢谢[打call] 1我是rx580显卡（8G显存）现在用的是秋叶大佬的整合包对于视频里的新模型能跑得动吗 2我去临摹其他大佬的图模型参数什么的都一模一样但生成的图细节量完全比不上原图 3无论我怎么添加关键词调参数生成的图的细节都是糊的看起来有重影或者涂抹痕迹没有原图干净
小李xiaolxl:
sdxl的效果确实有很大提高，同时也欢迎大家试试我微调的sdxl大模型~ BV1Dj41197yu

【回复】小李老师太强了！很早以前就给大家推荐过国风3了，肝完视频马上来下载体验一波！[doge]
【回复】回复 @Nenly同学 :说真的，视频做的非常好，讲的也很通俗易懂，就是语速略快了，慢一点，对80后的老年人更友好一点
菲菲Kaori是小透明:
正好最近也摸索了一段时间的sdxl，可以分享一下个人的使用体验。 相较于sd1.5，xl最恐怖的地方就是泛化性实在是太强了，这种泛化性带来了更多的出图可能性。下面以一组例图说明。 第一张水墨风格的图片很多人可能会觉得，这有什么，1.5加上合适的lora一样画的出来，但关键是这张图是用提示词直出的，没有加任何lora。 这种恐怖的泛化能力，使得我画出了第二张图片，保留汉服正确形制是基础上，利用多种风格化关键词，把水彩，工笔，写实风格多种画风融合在一起，且保留了较为完整的细节。 这种泛化能力，甚至允许一个经过动漫风格微调的模型，向写实风格迁移。 这就有了图3，4，5，做到了真实的衣服质感+具备一定动漫特征的人脸。 当然还有就是细节，sdxl的细节，太合理了，是那种用了之后，回到1.5之后会大呼，这1.5细节画的太假了的那种合理。 反正我现在已经是急急国王了，恨不得明天就能见到优秀到社区精调模型和controlnet适配。

【回复】还有一点，20g显存以下，真的还是不推荐sdxl，我用4090开2.3倍高清修复，就有概率显存溢出，显存不够不能高清修复的情况下，效果还真不如1.5，或许可以等社区对sdxl量化剪枝[以闪亮之名_针不戳]
【回复】[以闪亮之名_吃瓜]还有一点，UP讲的有一点疏漏@@Nenly同学 ，其实想要使用refiner模型，也不一定非要使用comfyui，可以直接在webui中加载refiner插件；加载插件后，就可以直接将潜空间信息从base模型传递给refiner模型了，但由于我最近被B站盯上了，发网址会直接被屏蔽，所以就不发链接了......
【回复】关于refiner优化器，有一个比较有趣的现象是，一部分c站作者，特意在文档中写明了“不要使用comfyui的refiner”，虽然不知道为什么，但使用微调模型的情况下，不使用refiner似乎的确也能获得不错的效果。
哔哩哗哩数字藏品:
重要的是用SDXL跑图更花时间了，不能愉快的抽卡了

【回复】昨天晚上用了一次，4090的24gb显存占用不稳定，拉满，负载基本拉满，跑一张图体感有一分钟，分辨率700+1024左右，出二次元图，那质量太差，我不敢看。内存32g溢出，算上虚拟内存，总共用了50多gb。用了一键整合包平台，没有同时加载插件里面的细化模型。
【回复】回复 @Nenly同学 :移动端4060 8G 内存16g，跑1024要4分钟，而且照片还有一堆噪点
【回复】回复 @设计峰 : ComfyUI的知识体系比较庞大，以后一定有机会做的！如果你的SD基本功已经比较扎实了，可以花点时间看看@只剩一瓶辣椒酱 老师的这个系列：BV1Fo4y187HC，相信会对你有帮助哈！
WhySerious0:
观点跟我差不多[doge]为了更好数据化的说明问题，我在准备基于GhostReview的SDXL的量化评测(唉，又要改代码[笑哭])

【回复】写这期脚本的时候请教了Ghost老师很多问题。狠狠蹲一波GhostReview的新进展了[热词表情_世萌双冠]
【回复】抓住一个鬼壳作者[星星眼]
ouco:
我一直认为ai绘图这种工具绝对是越来越操作简单化的，这一定是必然的趋势。现在花大代价去学所谓的ai课程，很快就会发现就是浪费时间和精力。

【回复】越来越方便是肯定的，但是不会越来越简单。你把它想做一个工具就很好理解了。就像PS这么多年了，更新了越来越多实用的功能，以前操作很复杂的功能现在也可以越来越简单的操作了，比如以前要用钢笔抠图，现在一键可以抠出大部分主体。但是事实是，这些越来越方便的功能并没有让PS变得简单人人能上手，它只是提高了效率，增加了软件实用的场景，实际上使用门槛还是一样的，并没办法做到任何人拿来就用。
【回复】对于一部分人来说就是个噱头，和领导汇报罢了，细致的东西目前的AI是干不了的
【回复】那你就一直待在原地等吧
iLab的AIGC笔记:
配置：9600KF + 16GRAM + 12G 3060，出图速度 webUI 和 ComfyUI 都是 1.25it/s 左右 (用的 DPM++2M K)，平均一张图也就十几秒，图片质量除了手脚之外，其他都很满意。现在除了要放大图切换回2.1，需要 inpaint 切换会1.5，其他我都是用 SDXL 了，希望 Stabilityai 赶紧把 SDXL 的 inpaint 模型交出来，再出个 ControlNET 就基本完美了。 我主要用在电商图片，即使是用 WebUI 不经过精炼的结果都可以直接使用。我也喜欢 ComfyUI，但是有一个问题，使用 SDXL 每跑一次图都会让我的电脑卡住几秒，如果正在听歌或者看视频，会被直接卡成狗，这点卡顿在 WebUI 只发生在加载和切换模型的时候。 目前C站上基于 SDXL 微调的大模型质量都不好，可能的原因：SDXL 已经不需要 masterpiece 类似的质量词，并且基模自身带有明显的风格分类（anime,photographic,digital art,comic book…），prompt 只需要按照自然语言描述即可，微调大模型都还在按照旧方案基于 danbooru 去写 prompt 训练，而且把基模里的所有风格都统一成一种风格，比如二次元把 photographic 污染成 anime，在出图的时候也没有按照 SDXL 的 prompt 标准，出来的图其实是被污染过的 photographic 表现为 anime 样子。（我的 SD 刚开始学，了解的不多，只是基于目前所了解到的情况发表看法，如果说的不对请轻喷）

【回复】SDXL会迅速建立新的生态环境，包含插件，模型，甚至商业应用，作者已经收购了comfyUI，和推出fooocus，多关注官网吧
【回复】卡是因为内存爆掉了，16g还是少了。我和你一样，打开资源管理器一看，固态都在疯狂读写。
【回复】回复 @丢丢而已嘛 :把VAE切换为自动或者无
泰达创艺生活:
我觉得相较于现在的使用难度来说，AI画图的门槛可以说是几乎没有了，通过UP前面的课程完整学习下俩，实际上也是一个深入了解AI的过程，如果说只是单纯用最做图，简单的几个提示词就画出完成度很高的图片，那只能说明有很多的工作都是模型帮助使用者完成的，而使用者其实也不知道自己想画什么，而只是抽到了一张比好好看的卡而已。而且还特别容易给使用者一个错觉，那就是这张好看的图是我画的[doge][doge]

【回复】[doge]这图是我调出来的没毛病吧
Mark-李:
秋叶大佬的启动器，一加载sdxl1必死机，有知道的人么？Nenly有遇到过吗？

【回复】我也是换了个安装包才可以换上，而且我那个的sdxl必须用搭配的vae，而且换上一次这个model时间挺长，我记得我当时拿安装包那个up叫灵动色彩好像
iLab的AIGC笔记:
可能很多同学没用过1.5和2.1的基模，我做了一个对比图对比下你们就知道SDXL改进有多大了

【回复】牛哇，面向电商出图的工作流吗，sdxl没有controlnet的情况下是如何还原电饭煲外形的？我的话可能会用p局部重绘的反向遮罩+ps抠图精修来实现，不知道猜的对不对
【回复】回复 @菲菲Kaori是小透明 :这个图里面的电饭煲是直接文字生成的，目前SDXL还没办法inpaint，等官方的inpaint模型。你的方法是对的，目前只能t2i生成背景自己ps然后回到图生图二次融合
夏目凪ナギ:
啊？突然更新！i了i了[喜欢][喜欢]电脑玩不动ai啦，喜欢笔记本又怕性能不够，有没有大佬告诉我rog枪神7那种的配置和同价位装机性能能差多少哦，好难选

【回复】我特意给你查了一下，4070畅玩肯定是没问题啦，但性能一定是没有同等价位装台式机舒服的（差多少不好说，但我记得同等价位显卡都能再上一个台阶了），并且AI绘画这种压榨显卡的应用还要拷打笔记本的散热系统。我在学习资料安装攻略的页面里详细讲了一些建议，你可以去参考一下！
【回复】不要买笔记本4070，纯纯的挤牙膏。笔记本买6300快以下的4060性价比最高，富哥买4080.别碰笔记本4090和4070，纯纯挤牙膏
【回复】回复 @Nenly同学 : up主你用的是什么显卡，还有3070 8g显卡能跑AI吗
AI视频小助理:
一、Stable deusion最新发布的SDXL 1.0图像生成模型，它具有更高的提示词包容度和更好的自然语言理解能力，将带来AI绘画的新时代。 00:01 - Stable Defusion XL 1.0是AI绘画爱好者关注的大新闻 01:00 - SDXL 1.0参数总量达到了百亿级别，对提示词的包容度非常高 02:53 - SDXL对概念的理解更为准确，支持自然语言，降低写提示词的门槛 二、该模型提高了作图效率和分辨率，生成的图片细节更加丰富，并且具备写字和人体结构准确度提升的能力。 03:02 - 使用翻译软件可以更方便地制作图片 03:30 - XL基础训练样本扩大到了1024像素，可以直出更大尺寸的图片 05:42 - XL能够生成准确的文本内容，人体结构准确度大幅度提升 三、介绍XL的SDXCEL功能，包括更准确的人体结构和更丰富的艺术风格选项，但建议先不要急着使用，等待一两个月会有更多基于Excel训练的新模型可供使用。 06:03 - SDXL 1.0提供了更丰富的艺术风格选项 07:10 - SDXL 1.0的出现对于stable defici的使用与应用意义更大于作用本身 09:01 - SDXL 2.0的应用还需要一到两个月的时间 四、如何使用excel进行模型训练，包括兼容性问题和操作简化，同时提供了官方推荐和下载步骤。此外，还介绍了使用excel进行模型训练的操作技巧和注意事项。 09:05 - 提供基于excel进行模型训练的教程 10:05 - 推荐使用excel进行模型训练和开发工具 11:53 - 提醒在上传图片时注意VAE的不兼容问题 五、coffee ui作为一种更为专业的工具，可以通过节点化功能实现各种功能组合，被专业工作者广泛应用。同时，作者还提供了一些copy ui的优势和应用场景的调研。 12:05 - 使用coffee ui，可独立部署，可用于软件应用中。 12:56 - coffee ui可复制利用，通过节点化实现灵活组合。 14:02 - coffee ui生成图片综合效率比web ui高，可用CPUY充分放excel潜力。 --本内容基于视频内容由模型生成，仅供参考，由@锐奕SharpSpark 召唤发送

【回复】霍，功能升级，还带黄标了[doge]
【回复】回复 @冠军格斯 : 机翻。。
【回复】回复 @冠军格斯 : 还有coffee ui——comfyUI
肉山大魔王墩墩:
@Nenly同学，想请教一下现在的硬件建议，计划最近新装机，预算大概就是极限到4070ti，想问下目前的环境来说4070和4070ti在AI画图方向相差大吗，有人建议3090会更好点，还有建议用丽台的画图卡的，因为不熟悉硬件不知道怎么分辨，请问有建议吗

【回复】回复 @肉山大魔王墩墩 :矿有肯定有，4070/ti只有12g显存，3090有24g，12g的显存很多玩法解锁不了，两个里边选肯定选3090
【回复】回复 @骑毛驴的杜甫 : 3060ti升级4060ti？反向升级吗。要么4090一步到位，要么继续用，先想清楚你是不是刚需，如果不是刚需只是绘画图个乐别去升级，显卡很贵不要拍脑袋买，考虑清楚你的需求。如果你是富哥当我没说
【回复】回复 @骑毛驴的杜甫 :预算够就升。4060ti有16G版本了？这么强？
wangbobobobobo:
@Nenly同学 请教老师，我这个怎么解决？

【回复】我也是这个问题，该怎么解决呀
【回复】回复 @wangbobobobobo : 兄弟是把整合包删除重装了吗[脱单doge]
气人的卡比:
comfyui装好后，打开标签页面显示127.0.0.1拒绝连接是什么情况，怎么解决呀

【回复】我解决了兄弟萌，打开extensions/sd-webui-comfyui/preload.py文件，将--comfyui-listen的default改成http://127.0.0.1:8188就行了~
【回复】回复 @酷酷Bear : 多谢，好使。[支持]
【回复】回复 @千稿 :我出视频了
胖哈哈:
十节基础课才看完，还没多少实际操作，就升级换版本了。我学习的速度还没更新速度快。

【回复】可以再看看我视频里说的，旧有的操作方式和学习积累不会被一下子改变，反而是你未来探索更多新东西的必备垫脚石
【回复】你知道我当初是怎么快速学会的吗，是涩涩的动力，涩涩真的是第一生产力[doge]
【回复】回复 @轩辕神舞 :跟我那时候一样，我是点整合包里的bat文件打开的，但原理不明，你可以多试几次
Blender3D:
XL对硬件要求提高了，我觉得这也会限制了他的普及，我觉得会有相当长一段时间1.5和XL并存。

【回复】我感觉想玩SDXL基本16G显存起步了，4090时不时能遇到显存耗尽。希望下一代旗舰卡能提高到至少36G显存，当然也希望SDXL能优化一下显存占用。
【回复】回复 @lirc021 : 等优化更靠谱，现在显卡没太大进步空间了
【回复】回复 @lirc021 : 1080TI 11g显存能跑 出图时看后台 11g显存和16g内存全部占满。
诚如诸神所说:
请教，为啥我的GPU跑不满呢？刚换的4060ti 16g[疑惑][疑惑][疑惑]，跑到sdxl，瞬时最高40%左右，只有就1秒

【回复】不能看综合利用率的，看显存吃得满不满，XL常态吃10~12G，马上出图的时候会跑满，这样就是正常的
【回复】你点击第二个框，下面有cuda选项，那个才是在干活的部分
【回复】看CUDA，基本是跑满的，不能看利用率