Weltmodelle mit NVIDIA Cosmos: Physikalische KI - AI Build & Learn

Willkommen bei AI Build & Learn, einem wöchentlichen KI-Engineering-Stream, in dem wir ein neues Thema auswählen und gemeinsam lernen, indem wir bauen. Diese Veranstaltung geht größer auf Weltmodelle mit NVIDIA Cosmos ein, einer offenen Familie von Weltgrundlagenmodellen, die für physikalische KI entwickelt wurden. Während DreamerV3 ein kleines Weltmodell für einen einzelnen Agenten lernt, ist Cosmos ein großes generatives Modell, das die physikalische Welt selbst simuliert: Vorhersage zukünftiger Videos, Durchführung von handlungsabhängigen Rollouts und Generierung synthetischer Daten zur Ausbildung von Robotern und autonomen Maschinen. Es steht in direktem Zusammenhang mit der Isaac Sim-Veranstaltung. Cosmos 3 (veröffentlicht 2026) bietet zwei Oberflächen: einen Reasoner zum Verständnis und zur Planung sowie einen Generator für Weltsimulation und zukünftige Vorhersage. Die Gewichte sind offen (OpenMDW-Lizenz) und auf Hugging Face verfügbar. Einige Dinge, die Sie zur Einleitung nachschlagen sollten: Modell: * NVIDIA Cosmos (offene Plattform von Weltmodellen): https://github.com/nvidia/cosmos * Cosmos Übersicht: https://www.nvidia.com/en-us/ai/cosmos/ * Cosmos Cookbook (ausführbare Rezepte): https://nvidia-cosmos.github.io/cosmos-cookbook/ Ressourcen * GitHub: https://github.com/sagecodes/ai-build-and-learn * Veranstaltungs-Kalender: https://luma.com/ai-builders-and-learners * Slack (Diskussion während der Woche): https://slack.flyte.org/ * Gastgeber: Sage Elliott: https://www.linkedin.com/in/sageelliott/ In diesem Stream * Einführung in das Thema * Gemeinschaftsdiskussion * Praktische Beispiele Gemeinschaftsherausforderung (optional) Versuchen Sie, 30–90 Minuten in der Woche damit zu verbringen, etwas zu lernen oder zu bauen, das mit dem Thema zusammenhängt, und teilen Sie dann, woran Sie in Slack arbeiten. Hinweis zu Flyte / Union Möglicherweise sehen Sie Flyte in einigen Demos verwendet. Flyte ist eine Open-Source-KI-Orchestrierungsplattform, die von Union (wo ich arbeite) gepflegt wird, um skalierbare, langlebige und beobachtbare KI-Workflows zu erstellen. Sie müssen Flyte nicht verwenden, um teilzunehmen. * Union: https://www.union.ai/ * Flyte: https://flyte.org/ Hinterlassen Sie einen Kommentar mit Ideen für zukünftige Themen (Agenten, RAG, MLOps, Robotik, Rahmen und mehr).