Vorwärts Bereitgestellt: Bewertungen - Jenseits der Vibe-Prüfung

Die meisten Teams bewerten ihre KI immer noch auf die gleiche Weise: einige Eingabeaufforderungen ausführen, die Ausgaben begutachten und starten, wenn es sich richtig anfühlt. Das funktioniert, bis es nicht mehr funktioniert — bis der Agent lautlos in der Produktion scheitert, die Halluzination einen Kunden erreicht oder niemand erklären kann, warum die Änderung von letzter Woche die Dinge verschlechtert hat. Dieses Kaminfeuergespräch befasst sich damit, was nach der Vibe-Prüfung kommt: was eine Produktionsbewertung tatsächlich ist und wie man eine aufbaut, woher die Bewertungsdatensätze kommen, die Nutzung von Online-Bewertungen als lebende Leitplanken, die Debatte LLM-als-Richter gegenüber zweckgebundenen Bewertungsmodellen und ob man den gesamten Verlauf eines mehrstufigen Agenten oder nur seine endgültige Antwort bewerten kann. Außerdem die praktischen Entscheidungen, vor denen jedes Team steht — selbst erstellen oder kaufen und wer innerhalb eines Unternehmens für die Bewertungen verantwortlich ist. 🎤 🎤 🎤 REDNER 🎤 🎤 🎤 🏠 AUSGERICHTET VON VORWÄRTS BEREITGESTELLT Vorwärts Bereitgestellt ist ein KI-natives Startup, das agentische Produkte für PE-Portfoliounternehmen, Versicherer und andere Unternehmens-Teams entwickelt. Wir moderieren auch Kaminfeuergespräche und Podcasts mit Betreibern an der Spitze der vorwärts bereitgestellten Technik. 📅 Di, 1. Sep, 18-20:30 Uhr PT📍 Super geheim, San Francisco 🎟 Die Plätze sind begrenzt ✌️ Ausgerichtet im Founders Cafe, AngelLists Gründer-Community und Coworking-Space im ersten Stock des AngelList HQ. Hier bewerben.