Weltmodelle mit DreamerV3 - KI Aufbauen und Lernen

Willkommen bei KI Aufbauen und Lernen, einem wöchentlichen KI-Ingenieurstream, in dem wir ein neues Thema auswählen und gemeinsam lernen, indem wir bauen. ​Diese Veranstaltung startet eine Reihe über Weltmodelle: Modelle, die eine interne Darstellung davon lernen, wie eine Umgebung funktioniert, und diese dann nutzen, um vorherzusagen, was als Nächstes passiert und um zu planen. Es ist ein natürlicher nächster Schritt nach den Generation- und RL-Veranstaltungen, die beide Fäden zusammenführen. ​Wir beginnen mit DreamerV3, einem modellbasierten RL-Agenten und einem großartigen Einstieg in die Idee. Dreamer lernt ein kompaktes Weltmodell seiner Umgebung aus Erfahrung, und trainiert seine Politik fast vollständig innerhalb vorgestellter Rollouts dieses Modells statt in der realen Umgebung. Es ist leichtgewichtig (trainiert auf einer einzigen GPU), funktioniert in vielen Aufgaben mit denselben Einstellungen und verbindet sich direkt mit der RL- und MuJoCo-Arbeit. ​Einige Dinge, die Sie nachschlagen sollten, um zu beginnen: ​Modell: * ​DreamerV3 (Danijar Hafner): https://github.com/danijar/dreamerv3 * ​Paper: "Meistern verschiedener Domänen durch Weltmodelle" https://arxiv.org/abs/2301.04104 ​Hintergrund: * ​Das ursprüngliche "Weltmodelle"-Paper (Ha und Schmidhuber): https://worldmodels.github.io/ ​​​Ressourcen * ​​​GitHub: https://github.com/sagecodes/ai-build-and-learn * ​​​Ereigniskalender: https://luma.com/ai-builders-and-learners * ​​​Slack (Diskussion während der Woche): https://slack.flyte.org/ * ​​​Gehostet von Sage Elliott: https://www.linkedin.com/in/sageelliott/ ​​In diesem Stream * Einführung in das Thema * ​​​​Gemeindediskussion * Praktische Beispiele ​​​Gemeinschaftsherausforderung (optional) ​​​Versuchen Sie, 30–90 Minuten während der Woche damit zu verbringen, etwas über das Thema zu lernen oder zu bauen, und teilen Sie dann, woran Sie in Slack arbeiten. ​​​Hinweis zu Flyte / Union ​​​Sie könnten Flyte in einigen Demos sehen. Flyte ist eine Open-Source-KI-Orchestrierungsplattform, die von Union (wo ich arbeite) zur Erstellung skalierbarer, langlebiger und beobachtbarer KI-Workflows gepflegt wird. Sie müssen Flyte nicht verwenden, um teilzunehmen. * ​​​Union: https://www.union.ai/ * ​​​Flyte: https://flyte.org/ ​​​Hinterlassen Sie einen Kommentar mit Ideen für zukünftige Themen (Agenten, RAG, MLOps, Robotik, Frameworks und mehr).