Modèles mondiaux avec DreamerV3 - IA Construit et Apprend

Bienvenue dans IA Construit et Apprend, un flux hebdomadaire d'ingénierie IA où nous choisissons un nouveau sujet et apprenons en construisant ensemble. ​Cet événement lance une série sur les modèles mondiaux : des modèles qui apprennent une représentation interne du fonctionnement d'un environnement, puis l'utilisent pour prédire ce qui se passe ensuite et pour planifier. C'est une étape naturelle après les événements de génération et de RL, reliant les deux fils ensemble. ​Nous commençons avec DreamerV3, un agent RL basé sur un modèle et une excellente introduction à l'idée. Dreamer apprend un modèle compact du monde de son environnement à partir de l'expérience, puis entraîne sa politique presque entièrement à l'intérieur des simulations imaginées de ce modèle plutôt que dans le véritable environnement. Il est léger (s'entraîne sur un seul GPU), fonctionne sur de nombreuses tâches avec les mêmes réglages et se connecte directement aux travaux de RL et MuJoCo. ​Certaines choses à consulter pour commencer : ​Modèle : * ​DreamerV3 (Danijar Hafner) : https://github.com/danijar/dreamerv3 * ​Article : "Maîtriser des domaines divers grâce aux modèles mondiaux" https://arxiv.org/abs/2301.04104 ​Contexte : * ​Le papier original "Modèles mondiaux" (Ha et Schmidhuber) : https://worldmodels.github.io/ ​​​Ressources * ​​​GitHub : https://github.com/sagecodes/ai-build-and-learn * ​​​Calendrier des événements : https://luma.com/ai-builders-and-learners * ​​​Slack (Discuter pendant la semaine) : https://slack.flyte.org/ * ​​​Animé par Sage Elliott : https://www.linkedin.com/in/sageelliott/ ​​Dans ce flux * Introduction au sujet * ​​​​Discussion communautaire * Exemples pratiques ​​​Défi communautaire (optionnel) ​​​Essayez de passer 30 à 90 minutes pendant la semaine à apprendre ou à construire quelque chose en rapport avec le sujet, puis partagez ce sur quoi vous travaillez dans Slack. ​​​Remarque sur Flyte / Union ​​​Vous pourrez voir Flyte utilisé dans certaines démonstrations. Flyte est une plateforme d'orchestration IA open-source maintenue par Union (où je travaille) pour construire des workflows IA évolutifs, durables et observables. Vous n'avez pas besoin d'utiliser Flyte pour participer. * ​​​Union : https://www.union.ai/ * ​​​Flyte : https://flyte.org/ ​​​Laissez un commentaire avec des idées pour de futurs sujets (agents, RAG, MLOps, robotique, frameworks, et plus).