Wereldmodellen met DreamerV3 - AI Bouwen & Leren

Welkom bij AI Bouwen & Leren, een wekelijkse AI-engineeringstream waar we een nieuw onderwerp uitkiezen en samen leren door te bouwen. ​Dit evenement markeert het begin van een serie over wereldmodellen: modellen die een interne representatie leren van hoe een omgeving werkt, en die vervolgens gebruiken om te voorspellen wat er vervolgens gebeurt en om te plannen. Het is een natuurlijke volgende stap na de generatie- en RL-evenementen, waarbij beide lijnen samenkomen. ​We starten met DreamerV3, een modelgebaseerde RL-agent en een geweldige introductie tot het idee. Dreamer leert een compact wereldmodel van zijn omgeving op basis van ervaring, en traint vervolgens zijn beleid vrijwel helemaal binnen voorgestelde uitkomsten van dat model in plaats van in de echte omgeving. Het is lichtgewicht (traint op een enkele GPU), werkt over veel taken met dezelfde instellingen, en verbindt zich direct met het RL- en MuJoCo-werk. ​Enkele dingen om op te zoeken om aan de slag te gaan: ​Model: * ​DreamerV3 (Danijar Hafner): https://github.com/danijar/dreamerv3 * ​Paper: "Diverse Domeinen Beheersen door Wereldmodellen" https://arxiv.org/abs/2301.04104 ​Achtergrond: * ​Het originele "Wereldmodellen" paper (Ha en Schmidhuber): https://worldmodels.github.io/ ​​​Hulpmiddelen * ​​​GitHub: https://github.com/sagecodes/ai-build-and-learn * ​​​Evenementen Kalender: https://luma.com/ai-builders-and-learners * ​​​Slack (Bespreek het tijdens de week): https://slack.flyte.org/ * ​​​Gehost door Sage Elliott: https://www.linkedin.com/in/sageelliott/ ​​In deze stream * Introductie tot het onderwerp * ​​​​Discussie met de gemeenschap * Praktische voorbeelden ​​​Gemeenschapsuitdaging (optioneel) ​​​Probeer 30–90 minuten tijdens de week te besteden aan leren of bouwen aan iets dat gerelateerd is aan het onderwerp, en deel vervolgens waar je mee bezig bent op Slack. ​​​Opmerking over Flyte / Union ​​​Je kunt Flyte in sommige demo's zien. Flyte is een open-source AI-orchestratieplatform dat wordt onderhouden door Union (waar ik werk) voor het bouwen van schaalbare, duurzame en observeerbare AI-workflows. Je hoeft Flyte niet te gebruiken om deel te nemen. * ​​​Union: https://www.union.ai/ * ​​​Flyte: https://flyte.org/ ​​​Laat een opmerking achter met ideeën voor toekomstige onderwerpen (agenten, RAG, MLOps, robotica, frameworks, en meer).