Geração de Imagens de Código Aberto: Modelos de Difusão e LoRA - AI Build & Learn

Bem-vindo ao AI Build & Learn, uma transmissão semanal de engenharia de IA onde escolhemos um novo assunto e aprendemos construindo juntos. ​Este evento é sobre gerar imagens com IA. Não estamos presos a um único modelo, o objetivo é explorar o que há por aí e realmente experimentar alguns. Vamos focar em modelos de código aberto, mas você é bem-vindo para trazer modelos comerciais (DALL·E, Midjourney e amigos) se quiser comparar. ​Vamos tentar analisar ambas as principais famílias: modelos baseados em difusão (a abordagem dominante hoje) e modelos de imagem baseados em transformadores / autoregressivos. Eu vou pesquisar e experimentar algumas das melhores opções de código aberto antes da transmissão, e se o tempo permitir, também tentaremos ajuste fino com LoRA para ensinar a um modelo um novo estilo ou assunto. ​Algumas coisas para pesquisar para começar: ​Modelos de código aberto: * ​FLUX.2 (Black Forest Labs): benchmark de qualidade atual com pesos abertos; backbone DiT, até 4MP, referência de múltiplas imagens * ​Stable Diffusion 3.5 / SDXL (Stability AI): ecossistema mais profundo — LoRA, ControlNet, inpainting, incontáveis ajustes finos * ​Qwen-Image (Alibaba): forte em geral, especialmente bom em renderizar texto (incluindo chinês) * ​Z-Image / Z-Image-Turbo: Apache-2.0, qualidade próxima à FLUX.2 em apenas alguns passos (rápido e amigável ao comércio) * ​HunyuanImage (Tencent): outra opção de peso aberto de alta qualidade ​Ferramentas: * ​Hugging Face Diffusers: https://github.com/huggingface/diffusers * ​ComfyUI: fluxos de trabalho baseados em nós: https://github.com/comfyanonymous/ComfyUI * ​Ajuste fino de LoRA para modelos de difusão ​Recursos * ​​​GitHub: https://github.com/sagecodes/ai-build-and-learn * ​​​Calendário de Eventos: https://luma.com/ai-builders-and-learners * ​​​Slack (Discuta durante a semana): https://slack.flyte.org/ * ​​​Apresentado por Sage Elliott: https://www.linkedin.com/in/sageelliott/ ​Nesta transmissão * Introdução ao tema * ​​​​Discussão da Comunidade * Exemplos práticos ​​​Desafio da comunidade (opcional) ​​​Tente passar 30–90 minutos durante a semana aprendendo ou construindo algo relacionado ao tema, depois compartilhe o que você está trabalhando no Slack. ​​​Nota sobre Flyte / Union ​​​Você pode ver o Flyte sendo usado em algumas demonstrações. Flyte é uma plataforma de orquestração de IA de código aberto mantida pela Union (onde trabalho) para construir fluxos de trabalho de IA escaláveis, duráveis e observáveis. Você não precisa usar Flyte para participar. * ​​​Union: https://www.union.ai/ * ​​​Flyte: https://flyte.org/ ​​​Deixe um comentário com ideias para tópicos futuros (agentes, RAG, MLOps, robótica, frameworks e mais).