Trivalley Meetup - ComplianceAware Finetuning

Dopasowanie modelu sprawia, że jest on lepszy w zadaniu. Może również pogorszyć jego znajomość zasad.Ta sesja pokazuje, jak standardowe dopasowanie w nadzorze cicho demontuje bezpieczeństwo,którego model nauczył się podczas wstępnego szkolenia, a następnie przechodzi do Compliance-Aware Fine-Tuning(CAFT), które czyni zgodność twardym ograniczeniem w obrębie celu szkolenia, a niefiltracją na jego wierzchu. Zakończona na żywo notatnikiem, który dopasowuje model i mierzyodchylonie zgodności w miarę jego postępu.