ComfyUI 从零部署指南：节点工作流驱动 AI 视频与漫剧生成

如果你最近在尝试用 AI 生成视频尤其是那种带点故事感的“漫剧”或动态画面大概率会听到一个名字ComfyUI。它不像 Midjourney 那样点几下就出图也不像 Stable Diffusion WebUI 那样有直观的界面。第一次打开 ComfyUI满屏的“节点”和连接线可能会让你觉得这是在搞电路设计而不是做创意内容。但恰恰是这种看似复杂的“节点”工作流成了很多专业创作者和工作室从静态图片迈向可控视频生成的关键一步。它把 AI 生图的“黑盒”过程拆解成了一个个可拖拽、可连接、可调试的模块。这意味着你不再只能祈祷一次出图的结果而是可以精确控制从提示词解析、到模型加载、再到采样器参数、最后到视频合成的每一个环节。这种控制力对于需要角色一致、场景连贯的“漫剧”生成来说几乎是刚需。然而ComfyUI 的入门门槛也真实存在。从安装部署开始到理解节点逻辑再到安装插件扩展功能每一步都可能让新手卡住。网上教程虽多但往往针对某个特定版本或场景信息零散。今天我们就抛开那些零碎的片段从零开始为你梳理一份覆盖Mac 和 Windows 双平台的 ComfyUI 完整部署指南。我们不仅要把它装起来更要理解如何安装和管理插件如何部署核心节点最终目标是让你能跑通一个基础的“视频漫剧生成”工作流。这不是一次简单的软件安装而是一次对你工作流的底层重构。1. 理解 ComfyUI为什么“节点”是可控视频生成的核心在直接动手安装之前我们需要先达成一个共识ComfyUI 不是一个“更好用”的 AI 绘图工具它是一个可视化编程环境专门为 Stable Diffusion 这类扩散模型的工作流设计。这个根本性的定位差异决定了我们使用它的方式和心态。1.1 从“抽卡”到“流水线”工作流思维的转变在 WebUI 里你填写提示词调整几个滑块点击生成然后等待一个结果。这个过程更像“抽卡”你调整的是输入参数但模型内部如何运作、各个组件如何协作对你是不透明的。而 ComfyUI 将这个过程完全可视化、模块化了。想象一下工厂的流水线原材料你的提示词和初始图像从流水线起点进入经过一个个加工站模型加载、文本编码、潜在空间处理、采样、解码、后处理最终成为成品图片或视频。在 ComfyUI 里每个“加工站”就是一个节点Node节点之间的连线就是数据流。你可以清晰地看到文本提示词是如何被编码成模型能理解的向量的CLIP Text Encode 节点。基础模型和LoRA、ControlNet 等微调模型是在哪个环节被加载和应用的Load Checkpoint, Load LoRA 节点。采样器如 KSampler是如何一步步去噪从随机噪声生成图像的。VAE 解码器是如何将潜在空间的数据“翻译”回最终像素图的。对于图片生成这种控制已经很有用。但对于视频生成尤其是“漫剧”这种需要多帧连续、角色一致的场景这种流水线式的控制几乎是必需的。因为你不再处理单张图片而是处理一个图片序列。你需要确保序列中的每一帧在风格、角色、构图等方面都保持连贯。在 ComfyUI 中你可以通过复制和连接节点构建一个专门处理序列的流水线例如将上一帧的输出作为下一帧的部分输入使用 latent 或 image 的拼接节点或者使用专门的视频插帧、光流推算节点来平滑过渡。1.2 核心概念节点、工作流与自定义节点功能模块。每个节点有输入槽和输出槽。例如“Load Checkpoint”节点输入模型文件路径输出模型、CLIP、VAE 三个对象。工作流由节点和连接线组成的完整处理图谱。你可以保存.json文件和加载工作流这意味着你可以将一套复杂的生成方案例如特定风格的漫剧生成流程封装起来一键复用或分享。自定义这是 ComfyUI 的威力所在。社区开发了海量插件每个插件都会带来新的节点。你可以找到专门用于面部修复的节点、背景移除的节点、特定风格转换的节点当然还有各种视频生成和处理的节点。通过组合这些节点你可以构建出极其 specialized 的工作流这是其他一体化工具难以做到的。理解了这些我们再去看安装过程就会明白安装 ComfyUI 本体只是搭好了舞台真正的演出各种工作流需要靠插件和节点来丰富。我们的安装目标就是搭建一个稳定、可扩展的“舞台”。2. 双平台部署为 Mac 和 Windows 搭建稳定舞台ComfyUI 基于 Python 和 PyTorch因此它的安装本质上是准备一个合适的 Python 环境。对于大多数用户尤其是希望快速上手、避免环境冲突的新手我强烈推荐使用整合包。它会将 Python、PyTorch通常带 CUDA 支持、ComfyUI 本体以及一些常用依赖打包好解压即用。注意无论使用整合包还是手动安装请确保系统有足够的磁盘空间建议预留 20GB 以上并且路径中不要包含中文或特殊字符这是避免绝大多数奇怪错误的第一步。2.1 Windows 平台秋叶整合包是最佳起点对于 Windows 用户目前最成熟、社区支持最广的解决方案是“秋叶大佬”制作的整合包。它极大简化了部署过程。步骤一获取整合包通过可靠的渠道如秋叶的B站主页或相关社群找到最新版的ComfyUI整合包下载链接。通常是一个压缩包文件。将其解压到你希望安装的目录例如D:\AI_Tools\ComfyUI。步骤二启动与初步配置进入解压后的文件夹找到run_nvidia_gpu.batN卡用户或run_cpu.bat仅CPU或无N卡用户文件。双击运行run_nvidia_gpu.bat。首次运行会进行一系列初始化包括下载必要的模型文件如vae-ft-mse-840000-ema-pruned.safetensors到models/vae目录。请保持网络通畅。启动完成后命令行窗口会显示类似Running on local URL: http://127.0.0.1:8188的信息。打开浏览器访问http://127.0.0.1:8188即可看到 ComfyUI 的界面。步骤三放入基础模型整合包通常不包含庞大的基础模型如SDXL的.safetensors文件。你需要自行下载这些模型并将其放入正确的目录Stable Diffusion 检查点模型放入ComfyUI/models/checkpoints目录。VAE 模型放入ComfyUI/models/vae目录。LoRA 模型放入ComfyUI/models/loras目录。ControlNet 模型放入ComfyUI/models/controlnet目录。放置完成后在 ComfyUI 界面中点击右侧的“刷新”按钮即可在对应的加载节点中看到新加入的模型。2.2 macOS 平台手动部署与社区方案macOS 的部署相对灵活虽然没有像秋叶整合包那样“一键到位”的明星方案但步骤也很清晰。主要分为两种方式纯手动安装和使用社区脚本。方案A使用社区安装脚本推荐新手一些社区开发者提供了针对 macOS 的安装脚本可以自动处理大部分依赖。打开终端Terminal。使用 Git 克隆 ComfyUI 官方仓库或包含脚本的仓库。例如git clone https://github.com/comfyanonymous/ComfyUI.git cd ComfyUI寻找并运行社区提供的install_mac.sh或类似脚本。执行前请务必阅读脚本内容确认其执行的操作。脚本通常会创建 Python 虚拟环境安装 PyTorchmacOS 版和依赖。安装完成后运行python main.py启动服务。方案B纯手动安装适合有 Python 经验的用户安装 Homebrew如果尚未安装这是 macOS 的包管理器能简化很多安装过程。/bin/bash -c $(curl -fsSL https://raw.githubusercontent.com/Homebrew/install/HEAD/install.sh)安装 Python 3.10brew install python3.10克隆 ComfyUI 仓库git clone https://github.com/comfyanonymous/ComfyUI.git cd ComfyUI创建并激活虚拟环境强烈推荐避免污染系统环境python3.10 -m venv venv source venv/bin/activate安装 PyTorch前往 PyTorch 官网 根据你的 macOS 版本和芯片Intel/Apple Silicon选择正确的安装命令。对于 Apple SiliconM系列芯片通常推荐使用 Nightly 版本以获得更好的性能。安装 ComfyUI 依赖pip install -r requirements.txt启动 ComfyUIpython main.py同样访问终端输出的本地 URL如http://127.0.0.1:8188即可。macOS 模型放置在 ComfyUI 目录下创建models文件夹并在其中创建checkpoints,loras,controlnet,vae等子目录将对应模型放入即可。无论哪种方式首次看到那个布满网格的空白画布时你的舞台就已经搭好了。接下来我们要邀请“演员”和“道具”上场也就是安装插件和节点。3. 插件生态扩展能力边界安装与管理的最佳实践ComfyUI 本体只是一个框架它的强大完全依赖于插件带来的海量节点。对于视频漫剧生成我们尤其需要一些特定插件。3.1 插件安装的两种核心方式插件的本质是一个包含自定义节点代码的文件夹通常托管在 GitHub 上。安装方式主要有两种方式一通过 ComfyUI 管理器安装最推荐这是最便捷的方式但需要先安装一个叫ComfyUI Manager的插件它是管理插件的插件。进入你的 ComfyUI 安装目录。打开custom_nodes文件夹。在终端或命令行中在此路径下执行git clone https://github.com/ltdrdata/ComfyUI-Manager.git重启 ComfyUI。重启后界面上会出现一个额外的Manager按钮。点击Manager你可以浏览、搜索、一键安装或更新其他插件。它就像 ComfyUI 的“应用商店”。方式二手动 Git Clone对于不在管理器列表中的插件或者你想指定版本可以使用此方法。在custom_nodes文件夹下打开终端。使用git clone [插件仓库地址]命令。重启 ComfyUI。重要提醒安装插件后必须重启 ComfyUI 服务关闭命令行窗口再重新运行启动脚本新的节点才会被加载。3.2 视频漫剧生成必备插件推荐要实现标题所说的“视频漫剧生成”你可能需要以下几类插件。请注意插件生态日新月异名称可能变化以下为常见类别和代表性插件可通过 Manager 搜索动画/视频生成插件AnimateDiff这是当前最热门的文本/图像生成视频的插件之一。它通过注入运动模块让静态图片“动”起来是生成漫剧片段的核心。ComfyUI-VideoHelperSuite提供一系列视频加载、合成、帧处理的工具节点如加载视频、拆帧、合并帧为视频等。SVD或相关插件Stable Video Diffusion 是 Stability AI 推出的视频生成模型也有对应的 ComfyUI 节点实现。工作流与效率插件ComfyUI-Custom-Scripts提供大量实用小节点如提示词调度、图像缩放、批量处理等。Efficiency Nodes优化节点可以提升生成速度或降低显存占用。图像质量提升插件ComfyUI-Impact-Pack功能极其强大的综合包包含面部修复、细节提升、分割、检测等众多节点对于提升漫剧角色质量非常有用。各类Upscale超分插件如UltimateSDUpscale用于提升生成视频的清晰度。安装示例通过 Manager点击Manager按钮。切换到Install Node标签页。在搜索框输入AnimateDiff。找到对应的插件点击Install按钮。等待安装完成根据提示重启 ComfyUI。3.3 插件管理的注意事项依赖冲突不同插件可能依赖同一库的不同版本。如果安装后启动报错可以查看命令行错误信息通常是某个 Python 包版本不兼容。可以尝试在 ComfyUI 的 Python 环境中手动调整版本pip install 包名版本号。节点不显示安装后重启了但节点没出现首先确认插件是否安装在custom_nodes目录下。其次在 ComfyUI 界面中按CtrlF或点击鼠标中键打开节点搜索框输入插件或节点名称的关键词查找。有时节点名称可能与插件名不同。保持更新插件更新频繁。定期通过Manager的Update All功能或手动git pull更新插件可以获取新功能和修复。但更新前最好备份你的重要工作流.json文件。4. 节点部署与视频漫剧工作流初探插件安装好后你的节点面板会变得非常丰富。现在我们尝试搭建一个最简单的、基于 AnimateDiff 的文本生成视频工作流来理解节点如何协作。4.1 构建一个基础的文本生成视频流这个流程的目标是输入一段提示词生成一个短视频。我们将使用AnimateDiff插件。添加节点在空白处右键选择Add Node。加载模型搜索并添加Load Checkpoint节点选择你的基础模型如 SDXL 模型。编码提示词添加两个CLIP Text Encode (Prompt)节点。一个连接Load Checkpoint的CLIP输出填入正面提示词如“一个宇航员在太空漫步电影质感”。另一个同样连接填入负面提示词如“模糊丑陋”。设置采样器添加KSampler节点。将其model连接到Load Checkpoint的MODEL将两个CLIP编码器的输出分别连接到positive和negative。引入动画这是关键步。搜索并添加AnimateDiff Loader节点。你需要下载对应的运动模块Motion Module通常是一个.ckpt或.safetensors文件并将其放入ComfyUI/models/animatediff目录没有则新建。在节点中选择你下载的运动模块。将该节点的model输出连接到KSampler的model输入。注意这里KSampler的model输入会被替换这是 AnimateDiff 的工作方式。设置空潜变量添加Empty Latent Image节点。这里需要设置视频的尺寸如 512x512和批处理大小batch size。batch size就是你想要生成的视频帧数如 16 帧。连接潜变量将Empty Latent Image的LATENT输出连接到KSampler的latent_image。解码图像添加VAE Decode节点。将其samples连接到KSampler的LATENT输出将其vae连接到Load Checkpoint的VAE输出。预览与保存添加Preview Image节点连接到VAE Decode的IMAGE输出用于在界面中预览第一帧。添加Save Image节点也连接到IMAGE输出用于将生成的帧序列保存为图片。生成视频生成的是一系列图片。你需要使用Video Helper Suite的节点如VHS_VideoCombine将这些图片合成为一个视频文件如MP4。点击Queue PromptComfyUI 就会开始执行这个工作流。你会在终端看到处理进度最终在输出目录得到一系列图片和一个视频文件。4.2 从单视频到“漫剧”工作流的进阶思路单一的短视频片段只是开始。“漫剧”意味着多镜头、有叙事。在 ComfyUI 中你可以通过更复杂的工作流来实现角色一致性结合LoRA节点。先训练一个角色 LoRA然后在每个视频片段的生成流程中都通过Load LoRA节点加载该 LoRA并调整权重从而保证不同镜头中角色长相一致。场景转换使用ControlNet节点如 OpenPose, Depth。你可以先绘制或生成关键帧的草图、姿势图或深度图作为控制条件输入到不同片段的生成中从而控制场景构图和角色动作的连贯性。串联片段生成多个短视频片段后使用视频编辑节点或外部工具将它们按顺序拼接起来。可以在工作流末尾加入音频加载和合成的节点。工作流模板化将生成一个片段的完整节点组保存为“宏”或“自定义节点”然后复制多份分别修改提示词和条件输入即可批量生成多个镜头。这就是 ComfyUI 工作流可复用性的体现。4.3 故障排查当节点工作不正常时即使按照教程部署你也可能会遇到问题。以下是经典的排查路径看报错永远首先查看命令行/终端窗口的红色报错信息。这是最直接的线索。错误可能关于缺失模型文件、Python 包导入错误、CUDA 内存不足、节点输入类型不匹配等。查模型确认所有用到的模型检查点、VAE、LoRA、ControlNet、Motion Module都已下载并放入了正确的目录。路径和文件名不要有中文。查连接检查节点之间的连线是否正确。鼠标悬停在节点的输入/输出槽上会显示数据类型如MODEL,LATENT,IMAGE。确保连接的数据类型匹配。查参数检查关键参数如采样步数、CFG 值、种子、图像尺寸、批处理大小。不合理的参数会导致生成失败或结果异常。查资源视频生成对显存要求很高。如果报错CUDA out of memory尝试减小图像尺寸、减少批处理大小帧数、启用--lowvram模式启动 ComfyUI或者使用Efficiency Nodes插件中的显存优化节点。隔离测试如果工作流复杂先从一个极简的流程开始测试例如只用Load CheckpointCLIP Text EncodeKSamplerVAE Decode生成单张图确保基础功能正常再逐步添加复杂节点如 AnimateDiff, ControlNet。安装和部署 ComfyUI尤其是配置好视频生成插件只是拿到了进入可控 AI 视频生成世界的门票。真正的挑战和乐趣在于如何像搭积木一样用这些节点构建出能稳定产出你心中所想画面的自动化流水线。从理解每个节点的输入输出开始从复用一个简单工作流开始逐步尝试修改、组合、创造。当你能让一个虚拟角色按照你的脚本在连贯的场景中演绎故事时你就会发现前期所有这些看似繁琐的部署和调试都是值得的。