ComfyUI

ComfyUI: 最强大和模块化的视觉 AI 引擎

什么是 ComfyUI？

ComfyUI 是一款强大且模块化的视觉 AI 引擎，专为创建和执行高级 Stable Diffusion 流程而设计。它使用基于图形/节点/流程图的界面，使其可在 Windows、Linux 和 macOS 上访问。

主要特性

• 节点/图形/流程图界面： 无需编码即可试验和创建复杂的 Stable Diffusion 工作流程。
• 异步队列系统： 通过仅重新执行工作流程中发生变化的部分来优化执行。
• 智能内存管理： 通过智能卸载在 VRAM 低至 1GB 的 GPU 上运行大型模型。
• 广泛的模型支持：
  • SD1.x, SD2.x (unCLIP)
  • SDXL, SDXL Turbo
  • Stable Cascade
  • SD3 和 SD3.5
  • Pixart Alpha 和 Sigma
  • AuraFlow, HunyuanDiT, Flux, Lumina Image 2.0, HiDream, Qwen Image, Hunyuan Image 2.1
  • Omnigen 2, Flux Kontext, HiDream E1.1, Qwen Image Edit
  • Stable Video Diffusion, Mochi, LTX-Video, Hunyuan Video, Wan 2.1, Wan 2.2
  • Stable Audio, ACE Step
  • Hunyuan3D 2.0
• 灵活的加载： 加载检查点和 safetensors，包括独立的扩散模型、VAE 和 CLIP 模型。
• 安全的文件加载： 确保安全加载 ckpt、pt、pth 和其他文件。
• 多功能技术： 支持 embeddings、textual inversion、LoRAs (regular, locon, 和 loha) 和 hypernetworks。
• 工作流程集成： 从生成的 PNG、WebP 和 FLAC 文件加载完整的工作流程（带种子）。
• 可定制的节点： 用于创建高级工作流程（如 Hires fix 等）的节点界面。
• 高级功能： 区域合成、修复、ControlNet、T2I-Adapter、GLIGEN、模型合并和 LCM 模型。
• 离线功能： 核心功能完全离线运行，除非另有说明，否则无需下载。
• API 集成： 可选的 API 节点，用于使用外部提供商的付费模型。
• 可配置的模型路径： 允许设置模型的自定义搜索路径。

ComfyUI 如何工作？

ComfyUI 通过一个可视化界面运行，您可以在其中连接节点以创建复杂的工作流程。每个节点执行一个特定任务，例如加载模型、编码文本或生成图像。数据流经这些节点，只有图中已更改的部分会被重新执行，从而优化性能和资源使用。

如何使用 ComfyUI？

1. 安装： 在桌面应用程序、Windows 便携包或手动安装之间进行选择。
2. 模型放置： 将您的 Stable Diffusion 检查点放在 models/checkpoints 目录中。
3. 运行 ComfyUI： 使用 Python 执行 main.py 脚本。

手动安装

要手动安装 ComfyUI，请按照以下步骤操作：

1. 克隆存储库：

   git clone https://github.com/comfyanonymous/ComfyUI
   cd ComfyUI
   

2. 安装依赖项：

   pip install -r requirements.txt
   

3. 运行 ComfyUI：

   python main.py
   

为什么选择 ComfyUI？

• 模块化： 无需编码即可设计和试验复杂的 Stable Diffusion 流程。
• 效率： 使用智能内存管理和异步执行来减少计算负载。
• 灵活性： 支持许多模型、技术和硬件配置。
• 定制： 构建和共享自定义节点和工作流程。

ComfyUI 适合谁？

ComfyUI 专为以下人群设计：

• 想要使用可视化界面创建复杂 Stable Diffusion 流程的 AI 爱好者。
• 需要一个模块化和灵活的框架来试验新的 AI 技术的研发人员。
• 想要使用 AI 生成和处理图像的艺术家和设计师。

发布过程

ComfyUI 遵循每周发布周期，但由于模型发布或重大代码更新，这可能会发生变化。发布过程涉及三个相互连接的存储库：

• ComfyUI Core： 发布稳定版本，并作为桌面版本的基础。
• ComfyUI Desktop： 使用最新的稳定核心版本构建新版本。
• ComfyUI Frontend： 接收每周更新，其中的功能会为即将发布的核心版本冻结。

入门

桌面应用程序

开始使用的最简单方法，适用于 Windows 和 macOS。

Windows 便携包

获取最新的提交和完全便携的版本，适用于 Windows。

手动安装

支持所有操作系统和 GPU 类型（NVIDIA、AMD、Intel、Apple Silicon、Ascend）。

示例工作流程

浏览示例工作流程，了解 ComfyUI 可以做什么。

如何在另一个 UI 和 ComfyUI 之间共享模型？

请参阅配置文件以设置模型的搜索路径。在独立的 Windows 版本中，您可以在 ComfyUI 目录中找到此文件。将此文件重命名为 extra_model_paths.yaml 并使用您喜欢的文本编辑器进行编辑。

社区

• Discord： 尝试 #help 或 #feedback 频道。
• Matrix space： #comfyui_space:matrix.org（类似于 Discord，但它是开源的）。

创建 AI 工作流程的最佳方式？

要在 ComfyUI 中创建有效的 AI 工作流程，请从明确的目标开始，并将流程分解为更小、更易于管理的步骤。利用基于节点的界面来连接各种操作，例如加载模型、处理图像和应用效果。尝试不同的配置，并利用社区资源来获取灵感和指导。

TL;DR

ComfyUI 是一款强大、模块化和多功能的视觉 AI 引擎，为用户提供工具来生成复杂的 Stable Diffusion 流程。基于可视化的图形/节点界面使艺术家、研究人员和开发人员都可以访问它。