Encontro Trivalley - Ajuste Fino ComplianceAware

O ajuste fino torna um modelo melhor na tarefa. Ele também pode torná-lo pior nas regras.Esta sessão mostra como o ajuste fino supervisionado padrão desmantela silenciosamente o comportamento de segurança que um modelo aprendeu na pré-treinamento, depois percorre o Ajuste Fino Consciente de Conformidade (CAFT), que torna a conformidade uma restrição rígida dentro do objetivo de treinamento em vez de um filtro por cima dele. Fecha com um notebook ao vivo que ajusta finamente um modelo e mede a deriva de conformidade à medida que acontece.