Введение в создание маленьких языковых моделей

Картик Мутусвами, старший архитектор ИИ в SAP, проведет вводную сессию по машинному обучению и большим языковым моделям.Этот мастер-класс представляет LLM через интерактивный генератор шуток, вдохновленный «Egal wie Witze». Учащиеся узнают основную идею, лежащую в основе LLM, предсказать следующий токен в последовательности и увидят, как простые системы генерации текста могут создавать структурированные выходные данные из небольшого набора данных. Сессия сочетает интуитивное объяснение основ LLM с интерактивной сборкой маленького генератора шуток, показывая, как выбор сэмплирования влияет на креативность, повторение и согласованность.Мастер-класс разработан так, чтобы быть доступным для новичков, при этом давая реалистичную умственную модель того, как работают современные LLM. К концу вы поймете, как модель может изучать повторяющиеся паттерны в тексте и использовать их для генерации нового текста в аналогичном стиле.