Modelos Mundiales con DreamerV3 - Construir y Aprender IA

Bienvenido a Construir y Aprender IA, una transmisión semanal de ingeniería de IA donde elegimos un nuevo tema y aprendemos construyendo juntos. ​Este evento da inicio a una serie sobre modelos mundiales: modelos que aprenden una representación interna de cómo funciona un entorno, luego la utilizan para predecir lo que sucederá a continuación y para planificar. Es un paso natural después de los eventos de generación y RL, uniendo ambos hilos. ​Estamos comenzando con DreamerV3, un agente de RL basado en modelos y una gran puerta de entrada a la idea. Dreamer aprende un modelo mundial compacto de su entorno a partir de la experiencia, luego entrena su política casi por completo dentro de los rollouts imaginados de ese modelo en lugar de en el entorno real. Es ligero (entrena en un solo GPU), funciona en muchas tareas con la misma configuración y se conecta directamente al trabajo de RL y MuJoCo. ​Algunas cosas que buscar para comenzar: ​Modelo: * ​DreamerV3 (Danijar Hafner): https://github.com/danijar/dreamerv3 * ​Paper: "Dominar Dominios Diversos a través de Modelos Mundiales" https://arxiv.org/abs/2301.04104 ​Antecedentes: * ​El artículo original "Modelos Mundiales" (Ha y Schmidhuber): https://worldmodels.github.io/ ​​​Recursos * ​​​GitHub: https://github.com/sagecodes/ai-build-and-learn * ​​​Calendario de Eventos: https://luma.com/ai-builders-and-learners * ​​​Slack (Discute durante la semana): https://slack.flyte.org/ * ​​​Presentado por Sage Elliott: https://www.linkedin.com/in/sageelliott/ ​​En esta transmisión * Introducción al tema * ​​​​Discusión Comunitaria * Ejemplos prácticos ​​​Desafío comunitario (opcional) ​​​Intenta pasar 30-90 minutos durante la semana aprendiendo o construyendo algo relacionado con el tema, luego comparte en qué estás trabajando en Slack. ​​​Nota sobre Flyte / Union ​​​Puedes ver Flyte utilizado en algunas demostraciones. Flyte es una plataforma de orquestación de IA de código abierto mantenida por Union (donde trabajo) para construir flujos de trabajo de IA escalables, duraderos y observables. No necesitas usar Flyte para participar. * ​​​Union: https://www.union.ai/ * ​​​Flyte: https://flyte.org/ ​​​Deja un comentario con ideas para futuros temas (agentes, RAG, MLOps, robótica, marcos y más).