Veranstaltung einreichen
Vibe Check: Was beim Trace zu beachten ist, wenn der Agent das Programm ist

Vibe Check: Was beim Trace zu beachten ist, wenn der Agent das Programm ist

30 Sep 202611:00 - 12:00 America/Los_AngelesOnline1 TeilnehmerOpen

Beschreibung

Wenn ein Agentenlauf schiefgeht, gibt es normalerweise keinen Stack-Trace und keine Möglichkeit, ihn durch erneutes Ausführen zu reproduzieren. Der Fehler lebt in der Form des Laufs: Welches Werkzeug er verwendet hat, wie oft er es versucht hat, wo er in einer Schleife steckte, was er nach dem dritten Versuch entschieden hat. Das macht das Tracing weniger zu einer netten Geste für die Betriebstechnik und vielmehr zur primären Debugging-Oberfläche für agentische Systeme. Der schwierige Teil besteht darin, zu wissen, was tatsächlich ausgegeben werden soll. Wenn du jeden LLM-Aufruf überwachst, erhältst du Rauschen. Wenn du nur den Einstiegspunkt überwachst, lernst du nichts. Parseable tritt mit uns in den Dialog, um sowohl das Warum als auch das Wie zu klären, indem es Temporal Workflows als den Instrumentierungspunkt verwendet, da der Workflow bereits die Agentenschleife ist und bereits jeden Schritt kennt, der ausgeführt wurde. Wir behandeln das Temporal-Plugin, das Workflow- und Aktivitätsereignisse als OpenTelemetry-Traces und abfragbare Protokolle bereitstellt, benutzerdefinierte Agentenereignisse, die innerhalb des Workflows ausgegeben und so geschützt sind, dass sie bei der Wiedergabe nicht dupliziert werden, und den Exportpfad, der die Temporal Cloud Workflow-Historie in die Objektspeicherung für Analytik und Prüfung überführt. Parseable ist Parquet- und objekt-speicher-nativ, sodass die Workflow-Historie dort in dem Format landet, in dem sie ohnehin abgefragt werden soll. Wir erörtern, wofür ein Live-Trace gut ist, wann es das falsche Werkzeug ist und was Teams von den Ausführungen, die sie bereits generieren, zurückhalten sollten.

Lassen Sie Ihr Netzwerk wissen, dass Sie dabei sind

Teilen Sie diese Veranstaltung, um Gespräche zu beginnen, Kollegen einzuladen und sich vorab zu vernetzen.

Verwandte Events

Plattform für künstliche Intelligenz

Kostenlos
Kostenlos registrieren