Ewaluacja agentów na danych z live gateway

Ewaluacja agentów na danych z live gateway Warsztaty praktyczne z inżynierii AI — SydneyWiększość warsztatów ewaluacyjnych uczy, jak oceniać zestaw danych zbudowanych przez kogoś innego. W produkcji zestaw danych to cokolwiek, co twój AI gateway przechwycił wczoraj — a większość zespołów wyrzuca to wszystko.W tej sesji zamienimy to na odwrót. Na początku poranka uruchamiamy na żywo flotę agentów AI, którzy w czasie rzeczywistym korzystają z prawdziwego AI gateway (Bifrost). Przez resztę sesji będziesz budować w oparciu o dane, które wciąż napływają — nie statyczny notatnik Colab, nie zabawne przykłady. Kiedy wyjdziesz, zbudujesz złoty zestaw danych z prawdziwego ruchu, dostarczysz działający zestaw ewaluacyjny i podejmiesz decyzję o wysłaniu/niewysłaniu na żywej próbie A/B — tę samą decyzję, którą zespół AI w produkcji podejmuje co tydzień, skompresowaną w jedno przedpołudnie.Co zrobiszKto jest to dlaInżynierowie AI/ML, inżynierowie danych oraz zespoły produktowe, które wprowadzają (lub zamierzają wprowadzić) funkcje AI i potrzebują pewności, że ich system rzeczywiście działa niezawodnie w produkcji. Zakłada się podstawową znajomość koncepcji AI/LLM — nie jest wymagane doświadczenie w budowaniu agentów.Co zabierzesz ze sobąZłoty zestaw danych zbudowany z prawdziwego ruchu, działający zestaw ewaluacyjny, który możesz rozszerzyć, oraz 30-dniowy plan wprowadzenia tego do własnego stosu produkcyjnego.Logistyka📅 Poniedziałek 27 lipca 🕤 9:30 – 12:30 📍 The Collider, 477 Pitt St, Haymarket 2000 ☕ Herbata poranna zapewniona, dzięki Soul OriginWeź laptopa z zainstalowanym Pythonem — pełne instrukcje dotyczące konfiguracji zostaną wysłane przed sesją.Prowadzone przez inżynierów danych, dla inżynierów danych. Cloud Shuttle · DataEngBytes · cloudshuttle.com.au