Мировые модели с DreamerV3 - AI Создание и Обучение

Добро пожаловать на AI Создание и Обучение, еженедельный стрим по инженерии ИИ, где мы выбираем новую тему и учимся, создавая вместе. ​Это событие запускает обсуждение мировых моделей: моделей, которые обучаются внутреннему представлению того, как работает среда, а затем используют его для прогнозирования того, что произойдет дальше, и для планирования. Это естественный следующий шаг после событий по генерации и RL, связывая обе темы вместе. ​Мы начинаем с DreamerV3, агента на основе модели RL и отличной отправной точки для идеи. Dreamer обучается компактной модели мира своей среды на основе опыта, затем тренирует свою политику почти исключительно внутри воображаемых развертываний этой модели, а не в реальной среде. Он легковесен (обучается на одном GPU), работает по многим задачам с одинаковыми настройками и напрямую связан с работой по RL и MuJoCo. ​Некоторые вещи, которые стоит изучить, чтобы начать: ​Модель: * ​DreamerV3 (Данижар Хафнер): https://github.com/danijar/dreamerv3 * ​Статья: "Осваивание разнообразных доменов через Мировые Модели" https://arxiv.org/abs/2301.04104 ​Фон: * ​Оригинальная статья "Мировые Модели" (Ха и Шмидхубер): https://worldmodels.github.io/ ​​Ресурсы * ​​​GitHub: https://github.com/sagecodes/ai-build-and-learn * ​​​Календарь событий: https://luma.com/ai-builders-and-learners * ​​​Slack (обсуждение на неделе): https://slack.flyte.org/ * ​​​Ведущий: Сейдж Эллиот: https://www.linkedin.com/in/sageelliott/ ​​В этом стриме * Введение в тему * ​​​​Обсуждение в сообществе * Практические примеры ​​​Сообщество вызовов (по желанию) ​​​Попробуйте посвятить 30–90 минут в течение недели обучению или созданию чего-то связанного с темой, а затем поделитесь тем, над чем вы работаете, в Slack. ​​​Примечание о Flyte / Union ​​​Вы можете увидеть, что Flyte используется в некоторых демонстрациях. Flyte - это платформа для оркестрации ИИ с открытым исходным кодом, поддерживаемая Union (где я работаю) для создания масштабируемых, надежных и наблюдаемых рабочих процессов ИИ. Вам не нужно использовать Flyte для участия. * ​​​Union: https://www.union.ai/ * ​​​Flyte: https://flyte.org/ ​​​Оставьте комментарий с идеями для будущих тем (агенты, RAG, MLOps, робототехника, фреймворки и другое).