Wdrażanie na miejscu: Oceny - Poza Oceną Wrażenia

Większość zespołów nadal ocenia swoje AI w ten sam sposób: uruchamia kilka poleceń, analizuje wyniki i wysyła, jeśli wydaje się to odpowiednie. To działa, dopóki nie przestaje działać — dopóki agent cicho nie zawiedzie w produkcji, halucynacje nie dotrą do klienta, lub nikt nie potrafi wyjaśnić, dlaczego zmiana z zeszłego tygodnia pogorszyła sytuację. Ten fireside omawia, co następuje po ocenie wrażenia: czym właściwie jest ocena produkcyjna i jak ją zbudować, skąd pochodzi dane do oceny, wykorzystanie ocen online jako żywych barier, debata na temat LLM jako sędziego kontra modele oceny stworzone z myślą o konkretnym celu, oraz czy można ocenić całą trajektorię agenta wieloetapowego czy tylko jego ostateczną odpowiedź. Plus praktyczne decyzje, przed którymi stoi każdy zespół — budować czy kupić, i kto odpowiada za oceny w firmie. 🎤 🎤 🎤 PRELEGENTI 🎤 🎤 🎤 🏠 GOSPODARZONY PRZEZ WDRŻANE NA MIEJSCU Wdrażanie na miejscu to startup z domeny AI, tworzący produkty agentowe dla firm portfelowych PE, ubezpieczycieli i innych zespołów w przedsiębiorstwie. Organizujemy również rozmowy przy kominku i podcasty z operatorami będącymi na czołowej linii wdrażania inżynierii na miejscu. 📅 Wtorek, 1 września, 18:00-20:30 PT📍 Super tajne, San Francisco 🎟 Miejsca są ograniczone ✌️ Gospodarzem jest Founders Cafe, społeczność i przestrzeń coworkingowa AngelList dla założycieli na pierwszym piętrze siedziby AngelList. Aplikuj tutaj.