ComfyUI + Ertas

    将 Ertas 训练的语言模型集成到 ComfyUI 的节点式工作流系统中,用于文本生成、提示工程和多模态 AI 管道。

    Overview

    ComfyUI 是一个强大的基于节点的可视化工作流引擎,最初为 Stable Diffusion 图像生成而设计,但越来越多地被用于更广泛的 AI 自动化任务。其基于图的界面让用户能够将处理节点——模型加载器、采样器、提示处理器和输出处理器——连接成完全可复现和可共享的复杂生成管道。每个工作流都是一个 JSON 图,可以进行版本控制、与团队成员共享,并通过 ComfyUI 的 API 以编程方式执行。

    ComfyUI 的扩展生态系统已迅速增长,支持与图像生成并行的语言模型集成。自定义节点包现在提供 LLM 聊天节点、文本处理工具和 API 连接器,让用户可以构建结合图像生成和文本分析的多模态工作流。对于构建涉及视觉和文本 AI 的内容管道的团队——带配图的产品描述生成、带品牌一致性视觉的营销文案,或带图像提取的文档处理——ComfyUI 提供了一个统一的可视化画布,所有组件都可以在其中连接。

    How Ertas Integrates

    Ertas 训练的模型通过支持兼容 OpenAI API 端点的 LLM 集成节点连接到 ComfyUI。在 Ertas Studio 中针对特定文本任务微调模型后——产品描述、内容分类或提示增强——您可以通过 Ollama 或任何兼容的服务器部署它,并在 ComfyUI 工作流中添加 LLM 节点。Ertas 模型生成的文本随后可以馈入其他节点:驱动图像生成提示、填充模板或触发条件工作流分支。

    这种集成对于内容生产管道特别有价值。想象一个工作流:上传产品图片,Ertas 训练的模型生成详细描述和 SEO 元数据,这些描述用于条件化图像变体——所有这些都在一个 ComfyUI 图中完成。微调模型确保描述匹配您的品牌语调并包含通用模型可能遗漏的领域特定术语。由于 ComfyUI 工作流是 JSON 图,整个管道可复现,可以通过 API 触发批量处理,将可视化原型转变为生产内容管道。

    Getting Started

    1. 1

      在 Ertas Studio 中微调文本模型

      针对您的特定文本任务训练模型——产品描述、提示增强、内容分类或任何文本生成用例。

    2. 2

      通过 Ollama 部署模型

      导出 GGUF 模型并通过 Ollama 提供服务。ComfyUI LLM 节点连接到 Ollama 的 API 端点进行文本生成。

    3. 3

      在 ComfyUI 中安装 LLM 节点

      通过管理器将 LLM 集成节点包添加到 ComfyUI。这些节点提供聊天补全、文本处理和 API 连接器功能。

    4. 4

      构建您的多模态工作流

      将 LLM 节点连接到您的图像生成管道。使用 Ertas 模型的输出来驱动工作流中的提示、元数据或条件逻辑。

    5. 5

      通过 API 进行批量处理

      使用 ComfyUI 的 API 以编程方式触发工作流。通过您的微调文本和图像管道批量处理数百个项目。

    json
    {
      "3": {
        "class_type": "LLM_ChatCompletion",
        "inputs": {
          "api_url": "http://localhost:11434/v1",
          "model": "ertas-product-7b",
          "system_prompt": "Generate a product description for the given image.",
          "user_prompt": "Describe this product in 150 words for an ecommerce listing.",
          "temperature": 0.7,
          "max_tokens": 256
        }
      },
      "4": {
        "class_type": "CLIPTextEncode",
        "inputs": {
          "text": ["3", 0],
          "clip": ["1", 1]
        }
      }
    }
    ComfyUI 工作流节点配置,使用 Ertas 训练的模型生成产品描述,并将其馈入图像生成提示。

    Benefits

    • 基于节点的可视化界面使复杂 AI 管道易于理解和共享
    • 在一个工作流中结合微调模型的文本生成和图像生成
    • 可复现的工作流以 JSON 存储,便于版本控制和协作
    • API 驱动的执行支持生产内容管道的批量处理
    • 活跃的扩展生态系统,LLM 集成支持不断增长
    • 自托管且完全私密——所有生成都在您的硬件上完成

    Related Resources

    Ship AI that runs on your users' devices.

    Early bird pricing starts at $14.50/mo — locked in for life. Plans for builders and agencies.