Modele Świata z DreamerV3 - AI Buduj i Ucz się

Witaj w AI Buduj i Ucz się, cotygodniowym streamie inżynieryjnym AI, gdzie wybieramy nowy temat i uczymy się poprzez wspólne budowanie. ​Wydarzenie to rozpoczyna cykl poświęcony modelom świata: modele, które uczą się wewnętrznej reprezentacji tego, jak działa środowisko, a następnie wykorzystują tę wiedzę do przewidywania, co się wydarzy, oraz planowania. To naturalny krok po wydarzeniach dotyczących generacji i RL, łączący obie te kwestie. ​Zaczynamy od DreamerV3, agenta RL opartego na modelach, który jest świetnym wprowadzeniem do tego pomysłu. Dreamer uczy się skompaktowanego modelu świata swojego środowiska na podstawie doświadczenia, a następnie trenuje swoją politykę prawie wyłącznie wewnątrz wyimaginowanych wyników tego modelu, a nie w rzeczywistym środowisku. Jest lekki (trenuje na pojedynczym GPU), działa w wielu zadaniach z tymi samymi ustawieniami i łączy się bezpośrednio z pracami RL i MuJoCo. ​Niektóre rzeczy do poszukiwania, aby zacząć: ​Model: * ​DreamerV3 (Danijar Hafner): https://github.com/danijar/dreamerv3 * ​Artykuł: "Opanowanie Różnorodnych Domen poprzez Modele Świata" https://arxiv.org/abs/2301.04104 ​Kontekst: * ​Oryginalny artykuł "Modele Świata" (Ha i Schmidhuber): https://worldmodels.github.io/ ​​​Zasoby * ​​​GitHub: https://github.com/sagecodes/ai-build-and-learn * ​​​Kalendarz Wydarzeń: https://luma.com/ai-builders-and-learners * ​​​Slack (Dyskusja w ciągu tygodnia): https://slack.flyte.org/ * ​​​Organizowane przez Sage Elliott: https://www.linkedin.com/in/sageelliott/ ​​W tym streamie * Wprowadzenie do tematu * ​​​​Dyskusja Społecznościowa * Przykłady praktyczne ​​​Wyzwanie społeczności (opcjonalne) ​​​Spróbuj spędzić 30-90 minut podczas tygodnia na uczeniu się lub budowaniu czegoś związanego z tematem, a następnie podziel się tym, nad czym pracujesz na Slacku. ​​​Uwaga o Flyte / Union ​​​Możesz zobaczyć Flyte używane w niektórych pokazach. Flyte to otwarta platforma orkiestracji AI utrzymywana przez Union (gdzie pracuję) do budowania skalowalnych, trwałych i obserwowalnych przepływów pracy AI. Nie musisz używać Flyte, aby wziąć udział. * ​​​Union: https://www.union.ai/ * ​​​Flyte: https://flyte.org/ ​​​Zostaw komentarz z pomysłami na przyszłe tematy (agenci, RAG, MLOps, robotyka, ramy i inne).