码农知识堂 - 1000bd
  •   Python
  •   PHP
  •   JS/TS
  •   JAVA
  •   C/C++
  •   C#
  •   GO
  •   Kotlin
  •   Swift
  • 双Buff加持!无GPU畅玩ControlNet Union,一个模型搞定10+图像控制


    acb6230cdde9bc0c1c33f25aea360dc7.png

    双重Buff加持,ComfyUI用户的生产力大升级。

    以往,为了实现轮廓、深度、动作姿势、颜色等多种控制效果,你可能需要安装不同的控制模型来独立实现,并且大大占用了你本地的存储空间。

    现在,Controlnet Union的推出让所有这些控制模型实现All in one,大大简化了用户操作流程,备受社区用户的推崇。

    更重要的是,不用考虑硬件与环境限制,在硅基流动团队开源的专用于ComfyUI的云节点BizyAir中,你可以丝滑畅享Controlnet Union,生成与Midjourney效果相当的任意长宽比的高分辨率图像,再一次大幅降低了使用门槛。
     

    一键直达传送门:

    代码:github.com/siliconflow/bizyair

    文档:bizyair.siliconflow.cn


    这次BizyAir上线的Controlnet Union节点“☁️BizyAir Controlnet Union SDXL 1.0”集成了controlnet-union-sdxl-1.0,这是由xinsir团队发布的用于图像生成和编辑的一站式控制模型,通过一个模型实现了10+种控制效果。

    具体而言,与独立控制模型相比,支持多种控制类型的Controlnet Union的性能无明显下降。支持多条件生成,无需设置超参数或设计提示。由于使用了与原始ControlNet几乎相同的参数,它的模型参数与计算量没有明显增加。此外,Controlnet Union兼容SDXL、Lora模型。

    5f5ef8990963ead9b5837685d5bd1491.png

    在ControlNet的工作流中,通常需要有图像预处理节点将图像转换为ControlNet网络可以使用的图像提示(Image Prompt)。BizyAir提供了超过20个ControlNet Preprocessing节点,包括Line Extractors、T2I-Adapter Only、Semantic Segmentation、Normal and Depth Estimators、Face and Pose Estimators、Tile六大类。用户可以直接执行图像到图像的生成等任务。

    ad6f26b2e8f0a00df526c8255b5edf06.png

    一个示例:将一张大白鲨的照片转换为深度图,然后绘制一个赛博朋克风格的潜水艇。

    c133b38d000c86fe87394a69974c960d.png
     

    除了这次上线ControlNet节点,此前,BizyAir已经上线SiliconCloud LLM、可图Kolors。

    那么,如何在ComfyUI中使用Controlnet Union?

    一、安装BizyAir

    在ComfyUI Manager中搜索“BizyAir”即可完成安装。此外,你还可以通过源码、Comfy-cli安装。Windows新手可以下载独立的压缩包。具体可见:

    bizyair.siliconflow.cn/getting-started/installation.html

    二、快速开始

    1. 设置API密钥

    首次使用,你需要通过“Set SiliconCloud API Key(设置SiliconCloud API密钥)”来生成API密钥。具体可见:bizyair.siliconflow.cn/getting-started/quick-start.html

    2. 使用Controlnet Union节点

    所有BizyAir节点都在“☁️BizyAir”目录下。可以使用 github.com/siliconflow/BizyAir/blob/master/examples/bizyair_controlnet_union_workflow.json 工作流快速尝试。
     

    2135adf04cba7b4ac22eda506d0c7dfa.gif

    3. 支持与本地节点混合使用

    BizyAir云节点可以与ComfyUI本地节点混合使用。比如,如果你不想使用AI自动生成的图片,也可以用本地图片做预处理。

    07dfd80bd3fac9bb4f5074bb7f6f8fb1.jpeg

    其他人都在看

    • 800+页免费“大模型”电子书

    • 文生图王者登场:SD3 Medium正式开源

    • 大模型产品化第一年:战术、运营与战略

    • 国产大模型新标杆!DeepSeek V2重磅升级

    • 比肩Midjourney-v6,无GPU跑可图Kolors

    • 20+公司AI产品分析;工程师的LLM使用痛点

    • 国产大模型免费用!开发者Token自由实现了

  • 相关阅读:
    sentinel简单限流和降级demo问题记录
    shell脚本中的运算符和条件判断
    Redis的缓存更新策略和缓存问题
    Apache Dubbo 首个 Node.js 3.0-alpha 版本正式发布
    北理工嵩天Python语言程序设计笔记(8 文件和数据格式化)
    洛谷P4032 火锅盛宴
    Ubuntu安装PCAN-View
    java计算机毕业设计在线教育系统源代码+系统+数据库+lw文档
    基于 ceph-deploy 部署 Ceph 集群
    Day721. 外部函数接口 -Java8后最重要新特性
  • 原文地址:https://blog.csdn.net/OneFlow_Official/article/details/140515692
  • 最新文章
  • 攻防演习之三天拿下官网站群
    数据安全治理学习——前期安全规划和安全管理体系建设
    企业安全 | 企业内一次钓鱼演练准备过程
    内网渗透测试 | Kerberos协议及其部分攻击手法
    0day的产生 | 不懂代码的"代码审计"
    安装scrcpy-client模块av模块异常,环境问题解决方案
    leetcode hot100【LeetCode 279. 完全平方数】java实现
    OpenWrt下安装Mosquitto
    AnatoMask论文汇总
    【AI日记】24.11.01 LangChain、openai api和github copilot
  • 热门文章
  • 十款代码表白小特效 一个比一个浪漫 赶紧收藏起来吧!!!
    奉劝各位学弟学妹们,该打造你的技术影响力了!
    五年了,我在 CSDN 的两个一百万。
    Java俄罗斯方块,老程序员花了一个周末,连接中学年代!
    面试官都震惊,你这网络基础可以啊!
    你真的会用百度吗?我不信 — 那些不为人知的搜索引擎语法
    心情不好的时候,用 Python 画棵樱花树送给自己吧
    通宵一晚做出来的一款类似CS的第一人称射击游戏Demo!原来做游戏也不是很难,连憨憨学妹都学会了!
    13 万字 C 语言从入门到精通保姆级教程2021 年版
    10行代码集2000张美女图,Python爬虫120例,再上征途
Copyright © 2022 侵权请联系2656653265@qq.com    京ICP备2022015340号-1
正则表达式工具 cron表达式工具 密码生成工具

京公网安备 11010502049817号