Introductie tot het bouwen van kleine taalmodellen

Karthik Muthuswamy, een Senior AI Architect bij SAP, zal een inleidende sessie hosten over machine learning en grote taalmodellen.Deze workshop introduceert LLM's door middel van een hands-on grapgenerator geïnspireerd op “Egal wie Witze”. De deelnemers leren het kernidee achter LLM's, namelijk het voorspellen van het volgende token in een reeks en zien hoe eenvoudige tekstgeneratiesystemen gestructureerde outputs kunnen produceren vanuit een kleine dataset. De sessie combineert een intuïtieve uitleg van de basisprincipes van LLM's met een interactieve opbouw van een kleine grapgenerator, waarbij wordt getoond hoe keuze in sampling creativiteit, herhaling en samenhang beïnvloedt.De workshop is ontworpen om toegankelijk te zijn voor beginners en geeft tegelijkertijd een realistisch mentaal model van hoe moderne LLM's werken. Aan het einde begrijp je hoe een model terugkerende patronen in tekst kan leren en deze kan gebruiken om nieuwe tekst in een vergelijkbare stijl te genereren.