Modelos Mundiais com DreamerV3 - AI Build & Learn

Bem-vindo ao AI Build & Learn, uma transmissão semanal de engenharia de IA onde escolhemos um novo tópico e aprendemos construindo juntos. ​Este evento inicia uma série sobre modelos mundiais: modelos que aprendem uma representação interna de como um ambiente funciona, e então usam isso para prever o que acontece a seguir e planejar. É um passo natural após os eventos de geração e RL, ligando ambas as threads. ​Estamos começando com DreamerV3, um agente de RL baseado em modelo e uma ótima porta de entrada para a ideia. Dreamer aprende um modelo de mundo compacto de seu ambiente a partir da experiência, depois treina sua política quase inteiramente dentro de rollouts imaginados desse modelo em vez do ambiente real. É leve (treina em uma única GPU), funciona em muitas tarefas com as mesmas configurações, e se conecta diretamente ao trabalho de RL e MuJoCo. ​Algumas coisas para pesquisar para começar: ​Modelo: * ​DreamerV3 (Danijar Hafner): https://github.com/danijar/dreamerv3 * ​Paper: "Dominando Domínios Diversos através de Modelos Mundiais" https://arxiv.org/abs/2301.04104 ​Contexto: * ​O artigo original "Modelos Mundiais" (Ha e Schmidhuber): https://worldmodels.github.io/ ​​​Recursos * ​​​GitHub: https://github.com/sagecodes/ai-build-and-learn * ​​​Calendário de Eventos: https://luma.com/ai-builders-and-learners * ​​​Slack (Discuta durante a semana): https://slack.flyte.org/ * ​​​Alojado por Sage Elliott: https://www.linkedin.com/in/sageelliott/ ​​Nesta transmissão * Introdução ao tópico * ​​​​Discussão da Comunidade * Exemplos práticos ​​​Desafio da Comunidade (opcional) ​​​Tente passar 30–90 minutos durante a semana aprendendo ou construindo algo relacionado ao tópico, e depois compartilhe o que você está trabalhando no Slack. ​​​Nota sobre Flyte / Union ​​​Você pode ver Flyte utilizado em algumas demonstrações. Flyte é uma plataforma de orquestração de IA de código aberto mantida pela Union (onde trabalho) para construir fluxos de trabalho de IA escaláveis, duráveis e observáveis. Você não precisa usar Flyte para participar. * ​​​Union: https://www.union.ai/ * ​​​Flyte: https://flyte.org/ ​​​Deixe um comentário com ideias para futuros tópicos (agentes, RAG, MLOps, robótica, frameworks, e mais).