Multimodal

内容 本文介绍使用Z-Image-Turbo配合ComfyUI的使用方法。 Z-Image-Turbo的优点：1. 较强的中文提示词跟随能力和汉字生成能力 2. 仅需8步推理即可生图，且参数量仅6B，配合量化可以在家用主机上运行(16G显存)。 竞争对手: Flux-2系列 考虑到某些地区无法使用ComfyUI-manager自动下载的网络限制，文件下载均以手动的方式。 前置准备工作 配置ComfyUI, 需要安装controlnet组件，可以额外安装llama-cpp-vlm文件来实现基于Qwen3-VL的图生文反推。如果需要查看反推的文本，可以安装comfyUI-custom-scripts。 Controlnet 代码仓库: 这里 Llama-cpp-vlm代码仓库： 这里 ComfyUI-custom-scripts代码仓库: 这里 注: Llama-cpp-vlm中需要的一个llama-cpp-python.whl插件的下载地址和下面和Qwen3-VL模型下载链接一并列出 需要下载的模型汇总 Z-image-turbo三件套，下载链接里包含满血版和量化版，运行的时候diffusion_models和text_encoders可以选择量化版以节省显存开销。下载后以图中的方式放入comfyui的目录中: 模型下载链接 ControlNet基础模型: 模型下载链接 ControlNet 人物动作控制模型，需要body_pose_model.pth,hand_pose_model.pth和facenet.pth: 模型下载链接 ControlNet 深度控制模型: 模型下载链接 Qwen3-VL 模型 + 相关插件所需wheel文件: 模型下载链接 以及 wheel下载 下载前请核对系统版本和python版本 常用的工作流搭建： 文生图 图生图(边缘检测) 图生图(人物姿势检测) 图生图(深度检测) 图生图(蒙版局域绘图) Qwen3-VL反推后文生图 可以直接使用的图片工作流示例(下载后直接导入): 点击这里下载 基础版本 controlnet版本 qwen3-vl反推版本

内容 在Ubuntu 22.04 系统上 部署 ComfyUI，在国内网络环境手动安装comfyui manager以拓展额外功能(custom nodes)，手动安装custom nodes。 官方文档: ComfyUI 安装 首先确认服务器上已经有conda环境并创造一个环境。 # 下载comfyui 的git仓库 git clone https://github.com/Comfy-Org/ComfyUI.git # 下载安装依赖 cd ComfyUI conda activate comfyui_env pip install -r requirements.txt # 启动ComfyUI并指定端口号和使用的gpu python main.py --listen --port 10020 --cuda-device 0 ​ 安装ComfyUI Manager # 切换到子目录 cd custom_nodes # 如果网络环境无限制 git clone https://github.com/ltdrdata/ComfyUI-Manager.git # 如果网络环境有限制 手动下载[仓库](https://github.com/Comfy-Org/ComfyUI-Manager), 解压并重命名为comfyui-manager，放入custom_nodes # 重新启动comfyui即可 python main.py --listen --port 10020 --cuda-device 0 ​ 安装任何插件 如果ComfyUI Manager GUI 可以下载nodes 如果ComfyUI Manager GUI 一直下载不了nodes # 下载对应的git仓库，重命名后放入custom_nodes git clone https://github.com/some/custom/nodes.git # 进入这个node的目录然后安装依赖 pip install -r requirements.txt # 重新启动comfyui # 一些常用的custom nodes: --Control Net: https://github.com/Fannovel16/comfyui_controlnet_aux --ComfyUI-Impact-Pack: https://github.com/ltdrdata/ComfyUI-Impact-Pack --rgthree-comfy: https://github.com/rgthree/rgthree-comfy 快速上手 最广泛使用的文生图模型是flux模型，利用它搭建一个工作流是一个不错的起点。 使用comfyui生成的图片自带工作流信息，可以直接拖进GUI形成工作流。 示例1：flux + lora + controlnet 工作流 示例2: mimicmotion 动作模仿视频工作流