首页 > 业界 > 关键词  > ControlNet最新资讯  > 正文

如何将ControlNet与SDXL模型配合使用

2024-06-20 10:30 · 稿源:站长之家用户

众所周知SD1.5的ControlNet模型在SDXL上是不可以使用的,那我们使用SDXL时需要用到ControlNet怎么办呢,别担心这个教程以canny为例教你怎么将ControlNet和SDXL配合使用

更新我们的ControlNet

首先就是更新我们的ControlNet,在秋叶整合包中点击版本管理——扩展—— 一键更新就可以啦

image.png

也可以在WebUI中——扩展——已安装——检查更新——点击应用——重启WebUI

image.png

下载SDXL控制模型

您可以通过以下链接下载适用于 SDXL 的 ControlNet 模型。

lllyasviel/sd_control_collection at main (huggingface.co)

您可以将模型放入

stable-diffusion-webui\extensions\sd-webui-controlnet\models

stable-diffusion-webui\models\ControlNet

不过在下载的时候有这么多模型我们怎么选择呢

image.png

Canny模型

这边以Canny模型为例,我们不用全部下载,我这边已经测试了这些模型的生成效果和速度

image.png

速度测试

image.png

模型大小

虽然diffusers_xl_canny_full效果很好,但不幸的是,它是最大的。(2.5 千兆字节)而且生成的时间也比较久,如果你只在乎质量不在意时间并且电脑配置很好可以考虑这个

kohya_controllllite控制模型非常小。鉴于它们的体积小,它们的表现非常好。

对 Canny SDXL 的建议

如果您对它的大尺寸和较低的速度感到满意,请使用diffusers_xl_canny_full。

如果您需要更小、更快的模型并且可以接受风格的轻微变化,请使用kohya_controllllite_xl_canny。

使用sai_xl_canny_128lora以获得合理的文件大小,同时减少样式的更改。

控制权重参数对于生成良好的图像至关重要。大多数型号需要它低于 1。

-------------------------------------------------------------------------------------------

想要深入学习更多AI教程,请访问我们的教程网站:

AI教程_深度学习入门指南 - 站长素材 (chinaz.com)

举报

  • 相关推荐
  • 端侧AI驱动产业链变革,elexcon2026聚焦芯片/存储/嵌入式核心器件创新

    近期华为、三星、追觅、阿里巴巴等科技企业密集发布智能穿戴新品,推动设备从“手机配件”向“独立智能终端”转型。这一趋势正深刻影响上游技术路径与产业格局,在AI芯片、存储与嵌入式领域引发新一轮技术升级与价值重构。中国成为全球创新引擎,2025年第二季度全球腕戴设备出货量同比增长12.3%,中国市场增速达33.8%,占据全球近半份额。端侧AI驱动技术升级,供应�

  • OPPO ColorOS 16正式版推送:首批适配11款机型

    ColorOS 16正式版于10月30日启动推送,首批覆盖11款OPPO和一加热门机型。该系统引入极光引擎、潮汐引擎与繁星编译器三大流畅技术,实现感官、性能与底层的全方位提升。极光引擎打造业内首个“无缝隙架构”,确保全场景丝滑交互;潮汐引擎首发芯片级动态追帧技术,系统重载流畅度提升37%,功耗降低13%;繁星编译器首创安卓跨级融合编译技术,大幅提升低算力芯片性能。此次升级将增强品牌市场竞争力,为用户带来更出色的使用体验。

  • 品牌AI搜索监控实战手册:你的企业在ChatGPT眼中是什么样子?

    某互联网大厂品牌总监分享:投入200万SEO使"企业级CRM"关键词在Google排名第一,但用户用ChatGPT询问"推荐适合中国企业的CRM系统"时,AI回答中根本没有该品牌。更值得警惕的是,竞品不仅被提及,还被AI用"性价比高""用户体验好"等正面词汇描述。这揭示2025年品牌营销最大盲区:企业不知道AI如何"看待"自身品牌。 数据显示超40%年轻用户开始使用AI搜索作为主要信息渠道,而绝大多数企业对自己在AI平台的"形象"一无所知。文章提出GEO品牌监控概念,通过覆盖度、推荐强度、信息质量三个维度量化品牌在AI搜索中的影响力,并给出五步实施流程:建立监控基线、竞品对标分析、设置持续机制、深度洞察挖掘、数据驱动优化。通过真实案例说明,系统化GEO优化能在3个月内提升品牌提及率33个百分点,证明AI搜索时代的品牌竞争已从"被看见"升级为"被AI信任"。

  • OPPO ColorOS 16正式版11月升级机型公布:支持23款机型

    ColorOS 16正式版11月升级计划公布,涵盖OPPO Find X7/N3系列、一加Ace 5系列等23款机型。系统引入极光引擎、潮汐引擎及自研繁星编译器,显著提升流畅度并降低功耗。新增一键闪记功能,支持复杂图文与超长视频录制。生态互联实现突破,全面打通Apple Watch生态,支持打车、外卖等信息跨设备显示。通过软硬协同优化,为用户打造更流畅持久的操作体验。

  • 微云全息(NASDAQ:HOLO):嵌套链——区块链架构创新重塑安全性与能耗格局

    微云全息提出嵌套链创新设计,通过分层数据存储架构将敏感信息置于内层区块链严密保护,普通信息存于外层链。采用跨链交互协议确保信息验证安全,节点差异化配置兼顾安全与效率。该方案突破传统单链模式局限,实现信息分类精细管理,为区块链在复杂应用场景中的安全性、能耗优化及运行效率提升提供全新解决路径。

  • 特斯拉磁悬浮Cybertruck车模上架中国官网 售价999元

    特斯拉磁悬浮Cybertruck车模11月12日在中国官网开售,定价999元。这款1:24比例模型精准还原实车细节,采用银色涂装与可亮车灯,内置14个LED灯,展现科技感。模型重293克,底座重1291克,确保稳定悬浮。使用时只需通电并放置于非金属表面,通过磁力实现悬浮效果,可静置观赏或轻触旋转,为收藏爱好者带来独特视觉体验。

  • 没有Pro Max!一加Ace 6T命名敲定:首发骁龙8 Gen5

    此前有网友在机场拍到一加Ace 6 Pro Max包装盒,不少网友认为这就是一加即将推出的骁龙8 Gen5新机。 博主数码闲聊站表示,一加骁龙8 Gen5新机不叫Ace 6 Pro Max,而是命名为Ace 6T,这里的T不是Turbo,是一加纯正的性能基因,一加的Turbo系列也已在路上了。 对比一加Ace 6,一加Ace 6T处理器由骁龙8 Elite换成了骁龙8 Gen5,电池容量突破8000mAh,还将带来炫酷的联名。 该博主还爆料,高通

  • 年费3999元!雷军:欢迎更多小米SU7 Ultra车主加入会员俱乐部

    如果你是小米SU7 Ultra的车主,是否加入了Ultra Club会员俱乐部呢? 近日,小米汽车发文称,上周末,小米SU7 Ultra在广州长洲岛游艇码头,联动知名游艇俱乐部举办了一场Ultra尊享品鉴会。 雷军转发该博文并表示,目前Ultra Club 已开放报名,欢迎更多Ultra车主加入 Ultra Club。

  • AI日报:可复刻音色的MiniMax Speech 2.6发布;TikTok推AI剪辑新工具“Smart Split”;Cursor 2.0发布

    本期AI日报聚焦多项技术突破:MiniMax发布低延迟语音合成系统Speech 2.6,实现实时交互;蚂蚁数科与宁波银行打造的金融AI方案入选国际标准;智源推出具身操作能力的Emu3.5多模态模型;Cursor 2.0通过自研模型实现多智能体协同编程;xAI升级Grok新增视频生成功能;OpenAI推出可定制安全模型;TikTok推出AI剪辑工具Smart Split;微软发布强化学习框架Agent Lightning提升大模型训练效率。

  • Soul App开源模型SoulX-Podcast登顶Hugging Face TTS趋势榜,AI语音对话再升级

    SoulX-Podcast语音生成模型在开源社区Hugging Face发布次日登顶TTS趋势榜。该模型由Soul AI Lab联合高校团队开发,专为多轮对话场景设计,支持中英川粤等多语言/方言与副语言风格,能生成超60分钟流畅自然、角色切换准确、韵律丰富的语音。它解决了传统语音系统在多轮对话中上下文衔接不自然、缺乏副语言控制能力等痛点,在播客、语音合成等场景表现突出,获开发者广泛关注。Hugging Face CEO也转发相关内容,团队未来将持续优化语音对话、拟人化表达等核心交互能力,深化开源生态建设。

今日大家都在搜的词: