Touch Weights - Hack für kontinuierliches Lernen

Hackathon für kontinuierliches Lernen in Berlin, veranstaltet von Construct Labs x Alexandria 1. August, Berlin. Ein Tag, ~20 der stärksten ML-Forscher und -Ingenieure Europas, ein Fokus: Modelle, die nach der Bereitstellung weiter lernen. Die heutigen LLMs leben in einer ständigen Gegenwart. Sie entstehen aus dem Training mit umfangreichem Wissen, das in ihren Parametern eingefroren ist, und bilden dann nie neue Erinnerungen. Wir kompensieren dies mit Gerüsten: Abruf, längerer Kontext, Agenten-Hilfen. Aber Abruf ist kein Lernen. Echte Lernprozesse erfordern Kompression, und Kompression passiert in den Gewichten. Dieser Hackathon dreht sich genau darum: Parameter zu aktualisieren, nicht Eingabeaufforderungen. Teams erhalten einen kuratierten Datensatz und dedizierte Rechenressourcen. Mögliche Themen umfassen: Reisestipendien stehen für starke Teilnehmer außerhalb Deutschlands zur Verfügung, insbesondere für Zürich, London und Paris. Unterstützt von Telli, Lyceum und Tech Europe. Bewerben Sie sich unten. Die Auswahl basiert auf nachgewiesener Arbeit: Papers, Repos oder Training-Läufe.