Оценка агентов на данных живого шлюза

Оценка агентов на данных живого шлюза Полудневный практический семинар по инженерии ИИ — СиднейБольшинство семинаров по оценке обучают вас оценивать набор данных, созданный кем-то другим. В производстве набор данных — это то, что ваш ИИ ш шлюз захватил вчера — и большинство команд выбрасывают все это.На этом занятии мы это изменим. В начале утра мы включим живой флот ИИ-агентов, работающих с реальным ИИ-шлюзом (Bifrost) в реальном времени. В течение остальной части занятия вы будете работать с данными, которые все еще поступают — это не статическая записная книжка Colab, не игрушечные примеры. К тому времени, когда вы уйдете, вы создадите золотой набор данных из реального трафика, отправите рабочий набор для оценки и примете решение о доставке/недоставке на живом тесте A/B — то же решение, которое производственная команда ИИ принимает каждую неделю, сжатое в один утренний период.Что вы сделаетеДля кого это предназначеноИнженеры ИИ/МЛ, инженеры данных и продуктовые команды, которые отправляют (или собираются отправить) функции ИИ и нуждаются в уверенности, что их система действительно работает надежно в производстве. Предполагается базовая знакомость с концепциями ИИ/LLM — опыт создания агентов не требуется.Что вы получитеЗолотой набор данных, созданный из реального трафика, рабочий набор для оценки, который вы можете расширить, и 30-дневный план по интеграции этого в вашу собственную производственную стек.Логистика📅 Понедельник, 27 июля 🕤 9:30 – 12:30 📍 The Collider, 477 Pitt St, Haymarket 2000 ☕ Утренний чай предоставляется при поддержке Soul OriginПринесите ноутбук с установленным Python — полные инструкции по настройке будут отправлены заранее перед занятием.Проводится инженерами данных для инженеров данных. Cloud Shuttle · DataEngBytes · cloudshuttle.com.au