Noc Badawczych AI — Studia Przypadków w Pretreningu

z ElevenLabs, Geodesic Research i PostHog · w Shoreditch Treehouse Jeśli kiedykolwiek przeprowadzałeś pretrening modelu, wiesz, że potrzebujesz danych, które warto przyswoić, mocy obliczeniowej oraz poważnej odpowiedzi na pytanie „dlaczego po prostu nie zadzwonić do API?”. To wieczór z trzema zespołami, które mają odpowiedzi — w różnych skalach — po którym nastąpi otwarta dyskusja i mnóstwo kanapek, aby nas napędzać. Prezentacje (15 min każda + Q&A) Pretrening GPT na laptopie — Angelos Perivolaropoulos, (Inżynier Badawczy w ElevenLabs) - Jakie intuicje z 10M parametrów są (a jakie nie są) przenoszone w górę. Encoder stworzony od podstaw dla danych z replay sesji — Nico Waltz, (Inżynier Badawczy AI w PostHog) - Samonadzorowany encoder trenowany bezpośrednio na nagraniach DOM, zaprojektowany do zastąpienia pipeline'u video-rasterizera + VLM w produkcji. Pretrening z zakresu zgodności — Cameron Tice (Współzałożyciel i Dyrektor Wykonawczy, Geodesic Research) - Lekcje z treningu 6,9B-parametrowych LLM na 500B tokenach w czterech różnych warunkach danych, aby sprawdzić, jak dyskurs AI w korpusach pretreningowych wpływa na zgodność. Dla kogo to jest​Aktywni studenci doktoranccy i badacze AI z praktycznym doświadczeniem w stosowaniu swojej pracy — osoby, które trenowały modele. Rejestracja jest zatwierdzana ręcznie.