快速上手AI绘画ComfyUI集成Nunchaku FLUX.1-dev的部署与使用教程想体验顶级AI绘画模型的强大能力但被动辄几十GB的显存需求吓退了Nunchaku团队推出的FLUX.1-dev量化模型通过前沿的SVDQuant技术让普通显卡也能流畅运行这个强大的文生图模型。今天我们就来手把手教你如何在ComfyUI中快速搭建一个属于自己的AI绘画工作站从零开始画出你的第一幅AI作品。1. 环境准备搭建你的数字画室在开始安装之前我们需要确保你的电脑环境满足基本要求。这就像装修一间画室得先看看空间和工具是否齐备。1.1 硬件要求你的显卡能胜任吗FLUX.1-dev模型对显卡有一定要求但好消息是量化版本大大降低了门槛让更多普通玩家也能参与进来。推荐配置拥有一张支持CUDA的NVIDIA显卡。原版模型可能需要24GB以上的显存但通过量化技术现在情况完全不同了INT4量化版适合大多数RTX 30/40系列显卡显存占用大幅降低是性价比最高的选择。FP4量化版专为最新的Blackwell架构显卡如未来的RTX 50系列优化能发挥新架构的全部性能。FP8量化版如果你的显存实在紧张这个版本能进一步降低要求是低显存显卡的救星。简单来说如果你有一张RTX 40608GB显存或更高配置的显卡基本就能流畅运行量化后的模型了。如果你的显卡是RTX 3060 12GB那体验会更佳。1.2 软件环境安装必要的“画笔和颜料”确保你的系统已经安装了以下基础软件它们是运行AI模型的基石Python 3.10或更高版本这是所有AI工具运行的基础环境。你可以从Python官网下载安装。Git一个版本控制工具用于从代码仓库下载必要的组件。几乎所有Linux/macOS系统都自带Windows用户需要单独安装。PyTorch一个主流的深度学习框架。你需要安装与你的操作系统和显卡驱动匹配的版本。建议访问PyTorch官网使用其提供的安装命令生成器来获取准确的安装指令。安装好这些基础工具后我们还需要一个专门用来下载模型文件的“搬运工”pip install --upgrade huggingface_hub运行这行命令它会安装huggingface_hub库。后面我们会用它来从模型仓库下载所需的文件非常方便。2. 核心安装部署ComfyUI与Nunchaku插件环境就绪现在开始安装我们的“画板”和“画笔”。ComfyUI是一个可视化的AI工作流工具你可以把它想象成一个功能强大的数字画板而Nunchaku插件就是专门为FLUX.1-dev模型定制的、一套精密的画笔和调色盘。2.1 安装ComfyUI-nunchaku插件这里提供两种安装方法你可以根据喜好和实际情况选择。方法一使用Comfy-CLI最快捷如果你喜欢命令行并且希望过程尽可能自动化这个方法最适合你。它通过一个统一的工具管理所有安装步骤。# 1. 安装ComfyUI的官方命令行工具 pip install comfy-cli # 2. 安装ComfyUI本体如果之前已经安装过可以跳过这一步 comfy install # 3. 通过工具直接安装Nunchaku插件 comfy noderegistry-install ComfyUI-nunchaku # 4. 将安装好的插件移动到ComfyUI的正确目录下 mv ComfyUI-nunchaku ComfyUI/custom_nodes/nunchaku_nodes几行命令就搞定了所有事情是不是很简单方法二手动安装更灵活、更透明如果你想更清楚地了解每一步在做什么或者需要自定义安装路径手动安装是更好的选择。# 1. 从GitHub克隆ComfyUI的源代码 git clone https://github.com/comfyanonymous/ComfyUI.git cd ComfyUI # 2. 安装ComfyUI运行所需的所有Python依赖包 pip install -r requirements.txt # 3. 进入自定义节点目录克隆Nunchaku插件 cd custom_nodes git clone https://github.com/mit-han-lab/ComfyUI-nunchaku nunchaku_nodes手动安装虽然步骤稍多但你能完全掌控整个过程适合喜欢折腾和有经验的用户。2.2 安装Nunchaku后端支持插件本体安装好后还需要安装其运行所需的“引擎”或“驱动”这就是后端。从v0.3.2版本开始这个过程被大大简化了。插件目录里会包含一个名为install_wheel.json的文件。在ComfyUI的Web界面中通常可以通过插件管理器或特定节点来加载这个文件它会自动检测并安装/更新所有必需的后端组件。如果找不到这个选项也可以查阅插件的官方文档通常会有更详细的手动安装说明。3. 模型准备获取你的“数字颜料库”平台搭建好了现在需要下载模型文件。你可以把这些文件理解为不同质地和效果的“数字颜料”只有将它们正确组合才能画出精彩的图像。3.1 配置工作流模板为了让ComfyUI能识别和使用我们刚安装的Nunchaku插件需要复制一些预设的工作流文件。这些模板就像已经帮你排版好的画布能让你快速开始创作而不用从零开始连接每一个节点。# 1. 进入ComfyUI的根目录如果你不在的话 cd ComfyUI # 2. 创建工作流示例文件的存放目录如果目录不存在则创建 mkdir -p user/default/example_workflows # 3. 将Nunchaku插件自带的示例工作流复制过去 cp custom_nodes/nunchaku_nodes/example_workflows/* user/default/example_workflows/3.2 下载核心模型文件现在来下载最重要的部分——模型文件本身。FLUX.1-dev需要几个不同的组件协同工作就像绘画需要画布、颜料和画笔一样。第一步下载基础FLUX模型必须安装首先下载文本编码器和VAE模型。文本编码器负责“读懂”你的文字描述VAE变分自编码器则负责将AI理解的“概念”最终渲染成你看到的像素图像。# 下载文本编码器模型它们会被自动放到 models/text_encoders 目录 hf download comfyanonymous/flux_text_encoders clip_l.safetensors --local-dir models/text_encoders hf download comfyanonymous/flux_text_encoders t5xxl_fp16.safetensors --local-dir models/text_encoders # 下载VAE模型放到 models/vae 目录 hf download black-forest-labs/FLUX.1-schnell ae.safetensors --local-dir models/vae第二步下载Nunchaku FLUX.1-dev主模型核心中的核心这是生成图像的大脑根据你的显卡类型选择合适的量化版本# 对于大多数RTX 30/40系列显卡使用INT4版本最通用 hf download nunchaku-tech/nunchaku-flux.1-dev svdq-int4_r32-flux.1-dev.safetensors --local-dir models/unet/ # 如果你的显卡是最新的Blackwell架构如RTX 50系列请使用FP4版本 # hf download nunchaku-tech/nunchaku-flux.1-dev svdq-fp4_r32-flux.1-dev.safetensors --local-dir models/unet/ # 如果你的显存非常紧张可以尝试FP8版本以进一步降低占用 # hf download nunchaku-tech/nunchaku-flux.1-dev svdq-fp8_r32-flux.1-dev.safetensors --local-dir models/unet/第三步可选下载LoRA模型让你的画作拥有独特风格LoRA模型就像特殊的滤镜、笔刷或风格包。它们体积小巧但能显著改变或增强生成图像的风格、细节或特定主题的表现力。FLUX.1-Turbo-Alpha可以显著加快图像生成速度。Ghibsky Illustration能让生成的图像带有宫崎骏/吉卜力动画的独特风格。你可以在Hugging Face或ModelScope等模型社区搜索“FLUX LoRA”找到更多有趣的模型。下载后将它们放在models/loras/目录下即可。4. 开始创作画出你的第一幅AI作品万事俱备只欠东风现在让我们启动ComfyUI开始真正的创作之旅。4.1 启动ComfyUI服务在ComfyUI的根目录下运行启动命令python main.py看到终端输出类似“Starting server”和“Listening on...”的信息后就说明服务启动成功了。打开你的浏览器访问http://localhost:8188这是默认地址你就能看到ComfyUI的图形化界面了。4.2 加载专属工作流进入ComfyUI的Web界面界面可能看起来有点复杂但别担心我们一步步来。点击右上角的“Load”按钮在弹出的文件选择器中找到并加载我们之前准备好的工作流文件。这里通常有两个选择nunchaku-flux.1-dev.json这是主推的工作流功能最全支持加载多个LoRA模型文生图效果最好。nunchaku-flux.1-dev-qencoder.json如果你在加载时遇到显存不足的问题可以尝试这个版本。它使用了4-bit量化的文本编码器能进一步节省显存。对于绝大多数用户直接加载第一个工作流即可。加载成功后界面中央会显示一个由各种节点和连线组成的“流程图”这就是你的绘画工作流。4.3 设置参数并生成图像现在到了最激动人心的部分用文字描述你的想法让AI将它变成画面。输入提示词Prompt在工作流图中找到一个标有“CLIP Text Encode (Prompt)”或类似字样的节点其旁边会有一个大的文本框。在这里用英文描述你想要的画面。FLUX模型对英文的理解和生成效果通常更好。例如A beautiful landscape with mountains and lakes, ultra HD, realistic, 8K带有山川湖泊的美丽风景超高清写实风格8KA cute cartoon cat wearing a hat, studio ghibli style一只戴帽子的可爱卡通猫吉卜力工作室风格Cyberpunk city at night, neon lights, rain, detailed赛博朋克都市夜景霓虹灯下雨细节丰富调整基本参数推理步数Steps一般设置在20-30步就能得到不错的效果。特别注意如果你在工作流中关闭了FLUX.1-Turbo-Alpha这个LoRA那么推理步数建议至少设置为20步否则可能影响生成质量。分辨率Width/Height可以从1024x1024或512x512开始尝试。如果生成时提示显存不足OOM首要尝试就是降低分辨率。LoRA权重如果你加载了额外的LoRA模型在对应的节点上可以调整“强度”strength权重数值通常在0-1之间用来控制该风格的影响程度。点击运行静待佳作所有参数设置好后点击界面右侧的“Queue Prompt”按钮。然后你就可以泡杯茶等待AI为你创作了。生成时间取决于你的显卡性能、设置的分辨率和步数通常从几十秒到几分钟不等。小提示第一次生成时模型需要从硬盘加载到显卡显存中所以会特别慢。之后的生成过程就会快很多。5. 常见问题排查与优化技巧新手起步难免会遇到一些小问题。这里总结了一些常见情况和解决方法帮你快速排雷。5.1 模型文件都放对位置了吗这是最容易出错的一步。请再次确认所有模型文件都放在了ComfyUI目录下正确的文件夹里文件类型存放目录示例文件名FLUX.1-dev 主模型models/unet/svdq-int4_r32-flux.1-dev.safetensorsLoRA 模型models/loras/各种.safetensors文件文本编码器models/text_encoders/clip_l.safetensors,t5xxl_fp16.safetensorsVAE 模型models/vae/ae.safetensors5.2 生成时显存不足OOM怎么办如果你的显卡显存比较紧张生成高分辨率图像时可能会报错。可以尝试以下方法选择更小的量化模型确保你下载的是INT4或FP8版本而不是庞大的FP16原版。降低生成分辨率这是最有效的方法。将1024x1024降到768x768或512x512显存压力会骤减。使用量化文本编码器工作流加载nunchaku-flux.1-dev-qencoder.json这个工作流。减少同时加载的LoRA每个激活的LoRA都会占用一部分显存。关闭其他占用显存的程序比如游戏、视频播放器等。5.3 生成的图片效果不理想如果感觉生成的图片模糊、扭曲或不符合预期可以尝试优化你的提示词更具体、更详细的描述往往能带来更好的结果。例如将“一只猫”改为“一只在柔软地毯上晒太阳的橘色英国短毛猫光线柔和细节清晰摄影风格”。适当增加推理步数更多的步数通常能让AI有更多“思考”时间画出更精细的细节但也会增加生成时间。尝试不同的采样器Sampler在工作流中找到“KSampler”节点尝试切换不同的采样器如Euler, DPM 2M等每种采样器都有其特点。使用负面提示词Negative Prompt在对应的节点输入你不希望出现在画面中的内容如“blurry, deformed, ugly, bad hands”模糊、畸形、丑陋、坏手这能有效排除一些常见缺陷。5.4 加载工作流时提示节点缺失如果加载json工作流文件时ComfyUI提示“Missing Nodes”说明你的环境缺少该工作流所依赖的一些自定义节点。最方便的解决方法是安装ComfyUI-Manager。这是一个社区维护的插件管理器安装后它通常能自动识别并提示你安装缺失的节点。6. 总结恭喜你至此你已经成功搭建了一个基于ComfyUI和Nunchaku FLUX.1-dev的强大AI绘画工作站。让我们快速回顾一下你刚刚掌握的技能环境准备检查了硬件与软件为运行模型打好基础。平台搭建学会了两种方式安装ComfyUI和Nunchaku插件。资源获取下载并正确放置了所有必需的模型文件。实践操作启动了ComfyUI加载工作流输入提示词并生成了你的第一幅AI画作。问题解决了解了常见问题的排查思路和优化技巧。这只是一个开始。ComfyUI的魅力在于其无限的可扩展性和灵活性。接下来你可以探索更多风格各异的LoRA模型打造独一无二的画风。学习构建更复杂的工作流实现图生图、局部重绘、高清修复等高级功能。调整各种参数和节点深入理解AI图像生成的原理从“使用者”变为“创作者”。记住AI绘画是一门需要练习的艺术。多尝试不同的提示词组合多观察参数变化带来的效果你的“手感”会越来越好。现在尽情享受你的AI创作之旅吧获取更多AI镜像想探索更多AI镜像和应用场景访问 CSDN星图镜像广场提供丰富的预置镜像覆盖大模型推理、图像生成、视频生成、模型微调等多个领域支持一键部署。