יצירת תמונות בקוד פתוח: מודלי דיפוזיה ו-LoRA - לבנות וללמוד עם AI

ברוכים הבאים ל-AI Build & Learn, זרם הנדסה שבועי של AI בו אנו בוחרים נושא חדש ולומדים על ידי בנייה ביחד. האירוע הזה עוסק ביצירת תמונות עם AI. אין מודל ספציפי שאנו קשורים אליו, הנקודה היא לחקור מה שיש בחוץ ולנסות כמה. נركز על מודלים בקוד פתוח, אך אתם מוזמנים להביא מודלים מסחריים (DALL·E, Midjourney וחברים) אם תרצו להשוות. ננסה להתמקד בשתי משפחות מרכזיות: מודלים מבוססי דיפוזיה (הגישה הדומיננטית כיום) ומודלי תמונה בהתבסס על טרנספורמציה / אוטו-רגרסיביים. אני אחקור ואנסה כמה מהאפשרויות המובילות בקוד פתוח לפני הזרם, ואם הזמן יאפשר, גם ננסה כיוונון עדין עם LoRA כדי ללמד מודל סגנון או נושא חדש. דברים לחקור כדי להתחיל: מודלים בקוד פתוח: * FLUX.2 (Black Forest Labs): קריטריון איכות פתוח-משקל עדכני; מיסוד DiT, עד 4MP, הפניה מרובת תמונות * Stable Diffusion 3.5 / SDXL (Stability AI): המערכת העמוקה ביותר — LoRA, ControlNet, תיקונים אינסופיים * Qwen-Image (Alibaba): רב-תכליתי חזק, טוב במיוחד בהנפשת טקסט (כולל סינית) * Z-Image / Z-Image-Turbo: Apache-2.0, קרוב לאיכות FLUX.2 בכמה צעדים (מהיר וידידותי למסחר) * HunyuanImage (Tencent): אפשרות נוספת באיכות גבוהה עם משקל פתוח כלים: * Hugging Face Diffusers: https://github.com/huggingface/diffusers * ComfyUI: זרימות עבודה מבוססות צומת: https://github.com/comfyanonymous/ComfyUI * כיוונון עדין עם LoRA עבור מודלי דיפוזיה משאבים * GitHub: https://github.com/sagecodes/ai-build-and-learn * לוח אירועים: https://luma.com/ai-builders-and-learners * Slack (דיונים במהלך השבוע): https://slack.flyte.org/ * מונחת על ידי Sage Elliott: https://www.linkedin.com/in/sageelliott/ בזרם הזה * הקדמה לנושא * דיון קהילתי * דוגמאות מעשיות אתגר קהילתי (אופציונלי) נסו להשקיע 30–90 דקות במהלך השבוע בללמוד או לבנות משהו הקשור לנושא, ואז שתפו מה שאתם עובדים עליו ב-Slack. הערה על Flyte / Union אתם עשויים לראות את Flyte בשימוש בכמה דemos. Flyte היא פלטפורמת אורקסטראציה פתוחה של AI שנשמרת על ידי Union (איפה שאני עובד) לבניית זרימות עבודה של AI ניתנות להרחבה, עמידות ואפשריות לצפייה. אין צורך להשתמש ב-Flyte כדי להשתתף. * Union: https://www.union.ai/ * Flyte: https://flyte.org/ השאירו תגובה עם רעיונות לנושאים עתידיים (סוכנים, RAG, MLOps, רובוטיקה, מסגרות, ועוד).