简介:很多人搜索“谁会ComfyUI”,其实想知道怎样装好模型、跑通图生视频流程。本文按实际使用顺序,讲解缺失模型的处理、目录配置、节点连线和显存不足时的参数调整,并介绍几个提升调试效率的设置。读完后,你可以自己排查常见报错,完成一次图生视频输出。
ComfyUI 是一个节点式图形界面。它把生成过程拆成加载模型、输入提示词、采样、解码、保存等独立节点,再通过连线组成完整工作流。和“输入提示词直接出图”的传统界面相比,它更适合需要精细控制、批量处理和流程复用的场景。
会用 ComfyUI 至少要具备四种能力:
判断一个人是否会用 ComfyUI,关键看他能否独立跑完一个完整工作流,并解决运行中的常见问题,而不只看他能否打开页面。
工作流文件保存的是节点图,同一个图生视频模板在不同版本的 ComfyUI 中,节点名称和参数可能有差异。开始前建议完成三件事:
部分新版本已内置 Create Video 和 Save Video 节点。较早的版本可能需要安装视频相关插件,例如 VideoHelperSuite,才能使用这两个节点。
打开图生视频模板时,页面通常会弹出缺少模型的提示。这类报错的原因一般有两个:模型文件没有下载,或者下载后没有放到正确目录。
图生视频模型体积较大,往往达到数 GB 甚至十几 GB,下载前先确认磁盘空间充足。缺失模型的提示中通常会给出下载链接,用下载工具获取文件即可。
不同类型的模型需要放入不同目录。常见对应关系如下,具体以工作流的要求为准:
| 模型类型 | 常见目录 | 作用 |
|---|---|---|
| 基础模型(Checkpoint 或 Diffusion model) | models/checkpoints 或 models/diffusion_models | 决定生成能力 |
| 文本编码器 | models/text_encoders | 把提示词转换为模型可用的条件 |
| VAE | models/vae | 在潜空间与像素之间转换 |
| LoRA | models/loras | 增加风格或角色特征 |
| CLIP 视觉模型 | models/clip_vision | 提取输入图片的特征 |
如果你已经有本地模型,不想重复下载,可以在 ComfyUI 根目录找到 extra_model_paths.yaml.example。复制一份并重命名为 extra_model_paths.yaml,再把其中的路径指向已有模型所在的位置,最后重启 ComfyUI。
模型放好后,刷新页面。如果缺少模型的提示消失,说明模型已被识别。如果仍然报错,请核对文件名是否与节点下拉列表中的名称一致。
图生视频工作流需要一张或多张输入图片。找到 Load Image 节点,逐个上传对应的图片。如果工作流中有多个图片输入节点,要确认每个节点都加载了正确的图片,避免串图。
输入图片的尺寸最好与工作流设定的生成分辨率一致,或按模板要求提前缩放。否则画面可能出现裁切或变形。
图生视频工作流的核心链路大致如下:
VAE Decode 把潜空间结果解码为一批图像帧。Create Video 把这批帧封装为视频,并设置帧率。Save Video 保存视频文件。这里有两个容易混淆的参数。第一,Create Video 中的帧率是输出视频的播放速度,常见设置为 16。它不决定模型生成多少帧。第二,生成帧数由模型或采样相关节点中的长度、帧数参数决定,需要单独设置。
连线时常见的错误有两类:Create Video 没有接到 VAE Decode 的输出,或者 Save Video 没有接到 Create Video 的输出。检查时可以沿着连线从输出端逐段确认。
连线完成后,点击运行按钮。页面右侧或队列面板会显示进度。运行结束后,视频会保存到 ComfyUI 的输出目录中。
同一个模板在不同显卡上的显存占用和耗时差异很大。即使模型齐全、连线正确,显存不足也很常见。建议先用较小参数试跑,记录自己机器上的显存占用和耗时,再决定是否加大参数。
下面是常见问题和处理方式:
| 问题 | 可能原因 | 处理方式 |
|---|---|---|
| 运行时报显存不足 | 分辨率过高、帧数过多、模型精度较高 | 降低分辨率或减少帧数,改用较小或量化后的模型版本 |
| 生成速度太慢 | 参数较大,或硬件性能有限 | 先用小分辨率和短时长试跑 |
| 页面提示缺少模型 | 模型未下载,或路径错误 | 下载模型并核对文件名与目录 |
| 模型已放入但下拉列表中没有 | 目录不对,或配置未生效 | 检查目录,重启 ComfyUI |
| 没有视频输出 | 保存节点未连接,或帧没有接入视频节点 | 补全 Create Video 和 Save Video 的连线 |
如果显存紧张,可以在启动参数中加入 --lowvram 或 --novram 等选项。这些选项能减少显存占用,但运行速度通常会下降。可执行 python main.py --help 查看当前版本支持的参数。
调参时有两个习惯值得坚持。第一,每次只改一个参数,这样出问题时容易定位原因。第二,修改前先保存一份原始工作流副本,参数改坏后可以随时回退。
切换中文界面。 打开设置(Settings),找到语言(Locale)选项并选择中文。不同版本的设置位置可能略有不同,找不到时可以搜索关键词“language”或“locale”。
用预览节点快速调试。 第一次生成时,可以把 Save Image 节点临时替换为 PreviewImage 节点,并把 VAE Decode 的 IMAGE 输出连接到它的 images 输入。预览结果只显示在界面中,不会写入输出目录,适合快速确认效果。效果满意后,再换回保存节点正式输出。需要注意,预览生成的内容不会保存为文件,要保留结果时仍需重新运行并使用保存节点。
熟悉画布操作。 拖动空白处可以平移画布,滚轮可以缩放画布,双击空白处可以搜索并添加节点。熟练这些操作后,调试复杂工作流会轻松很多。
会用 ComfyUI 的人,能够完成下面这个闭环:
如果你刚开始学习,建议先跑通一个默认的图生视频模板,确认每个节点的作用。之后再尝试替换模型、调整参数,最后组合成自己的工作流。这样每一步都能验证,出了问题也容易找到原因。