Trivalley Meetup- ComplianceAware Finetuning

Fijnafstemming maakt een model beter in de taak. Het kan het ook slechter maken in de regels.Deze sessie toont aan hoe standaard supervisie-fijnafstemming stilletjes het veiligheidsgedrag dat een model heeft geleerd tijdens de voortraining afbreekt, en loopt vervolgens door Compliance-Aware Fine-Tuning (CAFT), dat naleving een harde beperking binnen het trainingsdoel maakt in plaats van een filter erbovenop. Sluit af met een live notitieboek dat een model fijnafstemt en de nalevingsdrift meet terwijl deze zich voordoet.