Світові моделі з DreamerV3 - AI Створення та навчання

Ласкаво просимо до AI Створення та навчання, щотижневого потоку AI інженерії, де ми вибираємо нову тему та навчаємось, будуючи разом. ​Ця подія розпочне цикл про світові моделі: моделі, які вчать внутрішньому представленню того, як працює середовище, а потім використовують його, щоб передбачити, що станеться далі, та для планування. Це природний наступний крок після подій генерації та RL, що пов'язує обидві теми. ​Ми починаємо з DreamerV3, агента на основі моделі RL та чудового способу ознайомитися з ідеєю. Dreamer вчить компактну світову модель свого середовища з досвіду, а потім тренує свою політику майже повністю всередині уявлених розгорток цієї моделі, а не в реальному середовищі. Він легкий (тренується на одному графічному процесорі), працює з багатьма завданнями з тими ж налаштуваннями і безпосередньо пов’язаний з роботою RL та MuJoCo. ​Ось деякі речі, які слід знайти, щоб розпочати: ​Модель: * ​DreamerV3 (Danijar Hafner): https://github.com/danijar/dreamerv3 * ​Стаття: "Опанування різноманітних доменів через світові моделі" https://arxiv.org/abs/2301.04104 ​Фон: * ​Оригінальна стаття "Світові моделі" (Ha і Schmidhuber): https://worldmodels.github.io/ ​​​Ресурси * ​​​GitHub: https://github.com/sagecodes/ai-build-and-learn * ​​​Календар подій: https://luma.com/ai-builders-and-learners * ​​​Slack (Обговоріть протягом тижня): https://slack.flyte.org/ * ​​​Організатор: Sage Elliott: https://www.linkedin.com/in/sageelliott/ ​​У цьому потоці * Вступ до теми * ​​​​Обговорення в спільноті * Практичні приклади ​​​Виклик спільноти (за бажанням) ​​​Спробуйте витратити 30–90 хвилин протягом тижня, вивчаючи або створюючи щось, пов’язане з темою, а потім діліться тим, над чим працюєте в Slack. ​​​Зазначення щодо Flyte / Union ​​​Ви можете побачити Flyte, використаний у деяких демонстраціях. Flyte - це платформа оркестрації AI з відкритим вихідним кодом, яку підтримує Union (де я працюю) для створення масштабованих, надійних та спостережуваних робочих процесів AI. Вам не потрібно використовувати Flyte для участі. * ​​​Union: https://www.union.ai/ * ​​​Flyte: https://flyte.org/ ​​​Залиште коментар з ідеями для майбутніх тем (агенти, RAG, MLOps, робототехніка, фреймворки та інше).