ComfyUI

ComfyUI: O Motor de IA Visual Mais Poderoso e Modular

O que é ComfyUI?

ComfyUI é um motor de IA visual poderoso e modular projetado para criar e executar pipelines avançados de Stable Diffusion. Ele usa uma interface baseada em gráficos/nós/fluxogramas, tornando-o acessível no Windows, Linux e macOS.

Principais Recursos

• Interface de Nós/Gráfico/Fluxograma: Experimente e crie fluxos de trabalho complexos de Stable Diffusion sem codificação.
• Sistema de Fila Assíncrona: Otimiza a execução, reexecutando apenas as partes do fluxo de trabalho que mudam.
• Gerenciamento Inteligente de Memória: Executa modelos grandes em GPUs com até 1GB de VRAM por meio de descarregamento inteligente.
• Ampla Suporte a Modelos:
  • SD1.x, SD2.x (unCLIP)
  • SDXL, SDXL Turbo
  • Stable Cascade
  • SD3 and SD3.5
  • Pixart Alpha and Sigma
  • AuraFlow, HunyuanDiT, Flux, Lumina Image 2.0, HiDream, Qwen Image, Hunyuan Image 2.1
  • Omnigen 2, Flux Kontext, HiDream E1.1, Qwen Image Edit
  • Stable Video Diffusion, Mochi, LTX-Video, Hunyuan Video, Wan 2.1, Wan 2.2
  • Stable Audio, ACE Step
  • Hunyuan3D 2.0
• Carregamento Flexível: Carrega checkpoints e safetensors, incluindo modelos de difusão independentes, VAEs e modelos CLIP.
• Carregamento Seguro de Arquivos: Garante o carregamento seguro de arquivos ckpt, pt, pth e outros.
• Técnicas Versáteis: Suporta embeddings, inversão textual, LoRAs (regular, locon e loha) e hypernetworks.
• Integração de Fluxo de Trabalho: Carrega fluxos de trabalho completos (com seeds) de arquivos PNG, WebP e FLAC gerados.
• Nós Personalizáveis: Interface de nós para criar fluxos de trabalho avançados como Hires fix e mais.
• Recursos Avançados: Composição de área, inpainting, ControlNet, T2I-Adapter, GLIGEN, fusão de modelos e modelos LCM.
• Funcionalidade Offline: O núcleo opera totalmente offline, sem exigir downloads, a menos que especificado.
• Integração de API: Nós de API opcionais para usar modelos pagos de provedores externos.
• Caminhos de Modelo Configuráveis: Permite definir caminhos de pesquisa personalizados para modelos.

Como o ComfyUI funciona?

ComfyUI opera através de uma interface visual onde você conecta nós para criar fluxos de trabalho complexos. Cada nó executa uma tarefa específica, como carregar um modelo, codificar texto ou gerar uma imagem. Os dados fluem através desses nós, com apenas as partes do gráfico que foram alteradas sendo reexecutadas, otimizando o desempenho e o uso de recursos.

Como usar o ComfyUI?

1. Instalação: Escolha entre o Aplicativo de Desktop, o Pacote Portátil do Windows ou a Instalação Manual.
2. Colocação do Modelo: Coloque seus checkpoints de Stable Diffusion no diretório models/checkpoints.
3. Execute o ComfyUI: Execute o script main.py usando Python.

Instalação Manual

Para instalar o ComfyUI manualmente, siga estas etapas:

1. Clone o Repositório:

git clone https://github.com/comfyanonymous/ComfyUI cd ComfyUI 2. **Instale as Dependências**: pip install -r requirements.txt 3. **Execute o ComfyUI**: python main.py ```

Por que escolher o ComfyUI?

• Modularidade: Projete e experimente pipelines complexos de Stable Diffusion sem codificação.
• Eficiência: Reduza a carga computacional usando gerenciamento inteligente de memória e execução assíncrona.
• Flexibilidade: Suporta muitos modelos, técnicas e configurações de hardware.
• Customização: Construa e compartilhe nós e fluxos de trabalho personalizados.

Para quem é o ComfyUI?

ComfyUI é projetado para:

• Entusiastas de IA que desejam uma interface visual para criar pipelines complexos de Stable Diffusion.
• Pesquisadores e desenvolvedores que precisam de uma estrutura modular e flexível para experimentar novas técnicas de IA.
• Artistas e designers que desejam gerar e manipular imagens usando IA.

Processo de Lançamento

ComfyUI segue um ciclo de lançamento semanal, mas isso pode mudar devido a lançamentos de modelos ou atualizações significativas de código. O processo de lançamento envolve três repositórios interconectados:

• ComfyUI Core: Lança versões estáveis e serve como base para o lançamento de desktop.
• ComfyUI Desktop: Constrói novos lançamentos usando a versão estável mais recente do núcleo.
• ComfyUI Frontend: Recebe atualizações semanais, com recursos congelados para o próximo lançamento do núcleo.

Começando

Aplicativo de Desktop

A maneira mais fácil de começar, disponível no Windows e macOS.

Pacote Portátil do Windows

Obtenha os commits mais recentes e a versão completamente portátil, disponível no Windows.

Instalação Manual

Suporta todos os sistemas operacionais e tipos de GPU (NVIDIA, AMD, Intel, Apple Silicon, Ascend).

Exemplos de Fluxos de Trabalho

Explore exemplos de fluxos de trabalho para ver o que o ComfyUI pode fazer.

Como compartilhar modelos entre outra UI e ComfyUI?

Consulte o arquivo de configuração para definir os caminhos de pesquisa para modelos. Na versão independente do Windows, você pode encontrar este arquivo no diretório ComfyUI. Renomeie este arquivo para extra_model_paths.yaml e edite-o com seu editor de texto favorito.

Comunidade

• Discord: Experimente os canais #help ou #feedback.
• Espaço Matrix: #comfyui_space:matrix.org (é como o discord, mas de código aberto).

Melhor maneira de criar fluxos de trabalho de IA?

Para criar fluxos de trabalho de IA eficazes no ComfyUI, comece com um objetivo claro e divida o processo em etapas menores e gerenciáveis. Utilize a interface baseada em nós para conectar várias operações, como carregar modelos, processar imagens e aplicar efeitos. Experimente diferentes configurações e aproveite os recursos da comunidade para obter inspiração e orientação.

TL;DR

ComfyUI é um motor de IA visual robusto, modular e versátil que fornece aos usuários as ferramentas para produzir pipelines complexos de Stable Diffusion. A interface visual baseada em gráficos/nós o torna acessível a artistas, pesquisadores e desenvolvedores.