Oficina: Dominando a Observabilidade de IA com Granola e Braintrust

Seu agente está em produção. Agora você precisa entender o que ele está fazendo, onde está falhando e o que melhorar a seguir. Nesta oficina prática, você usará o Braintrust para transformar rastros de produção em avaliações direcionadas. Usaremos Tópicos para identificar padrões em rastros reais de agentes, identificar os problemas que valem a pena investigar e construir avaliadores personalizados para medi-los diretamente. Em seguida, você atualizará seu agente, reexecutará suas avaliações e comparará os resultados no Braintrust. Isso é observabilidade ativa: usar o comportamento de produção para decidir o que testar, corrigir e lançar a seguir. Você sairá com um fluxo de trabalho repetível para transformar o comportamento do agente em avaliações, medir melhorias e detectar regressões antes que os usuários o façam.O que você construirá:Formato: Oficina prática guiadaNível: Intermediário, experiência prévia com avaliações de IA necessáriaTraga: Um laptop