מודלים עולמיים עם DreamerV3 - בניית ובלימוד AI

ברוכים הבאים ל-AI Build & Learn, זרם הנדסת AI שבועי שבו אנו בוחרים בנושא חדש ולומדים על ידי בנייה יחד. האירוע הזה פותח רצף על מודלים עולמיים: מודלים שלומדים ייצוג פנימי של איך סביבה פועלת, ואז משתמשים בו כדי לחזות מה קורה בהמשך ולתכנן. זהו שלב טבעי אחרי אירועי הגנרציה וה-RL, הקושרים יחד את שני החוטים. אנו מתחילים עם DreamerV3, סוכן RL מבוסס מודל וכניסה מצוינת לרעיון. Dreamer לומד מודל עולם קומפקטי של הסביבה שלו מניסיון, ואז מאמן את המדיניות שלו כמעט לחלוטין בתוך תיקונים מדומים של המודל הזה ולא בסביבה האמיתית. זה קל משקל (מאמן על GPU אחד), עובד על פני משימות רבות עם אותם הגדרות, ומתחבר ישירות לעבודה של RL ו-MuJoCo. כמה דברים לחפש כדי להתחיל: מודל: * DreamerV3 (דניג'ר הafen): https://github.com/danijar/dreamerv3 * מסמך: "מומחיות בדומיינים מגוונים דרך מודלים עולמיים" https://arxiv.org/abs/2301.04104 רקע: * המאמר המקורי "מודלים עולמיים" (הה ומילדהובר): https://worldmodels.github.io/ משאבים * GitHub: https://github.com/sagecodes/ai-build-and-learn * לוח אירועים: https://luma.com/ai-builders-and-learners * סלק (דיון במהלך השבוע): https://slack.flyte.org/ * מארח על ידי סייג אליוט: https://www.linkedin.com/in/sageelliott/ בזרם הזה * היכרות עם נושא * דיון קהילתי * דוגמאות מעשיות אתגר קהילתי (אופציונלי) נסה לבלות 30–90 דקות במהלך השבוע בלמידה או בבנייה של משהו הקשור לנושא, ואז שתף מה שאתה עובד עליו בסלק. הערה על Flyte / Union תוכל לראות את Flyte בשימוש בכמה הדגמות. Flyte היא פלטפורמת אורכובציה ל-AI בקוד פתוח, המתוחזקת על ידי Union (כאשר אני עובד) לבניית זרימות עבודה של AI שניתן לסקל, עמידות וניתנות לצפייה. אינך צריך להשתמש ב-Flyte כדי להשתתף. * Union: https://www.union.ai/ * Flyte: https://flyte.org/ השאר תגובה עם רעיונות לנושאים עתידיים (סוכנים, RAG, MLOps, רובוטיקה, מסגרות, ועוד).