Hack de Melhoria Recursiva: Evals

Sundai: - uma sala cheia de pessoas construindo grandes ideias - todo domingo. - originado do MIT e Harvard. 135+ hacks. - aspirar a superar a norma. mirar mais alto. ------o ciclo já está girando. Mais de 80% do código da Anthropic é escrito por Claude. Jeff Dean deixou o Google após 30 anos para construir o ciclo para a ciência. Definir direções é o papel deixado para os humanos. a parte difícil: a pesquisa de engenharia de harness de Lilian Weng argumenta que o caminho de curto prazo para RSI passa pelo harness, em vez de reescrever peso. Um meta-harness que se auto-melhora está ao nosso alcance. O gargalo são os evals, porque um ciclo é tão bom quanto seu avaliador. Esse é o hack. na sala: pesquisadores do MIT CSAIL, Harvard, DeepMind e Meta Reality Labs. Co-organizado por Autolab e Maritime (empresas derivadas do MIT), EdotEnv (YC S26), YN.app e Sundai.------Construiremos agentes que se auto-melhoram recursivamente, ou treinaremos modelos usando princípios de autoresearch. ✨Agenda✨ 10:00 Introduções 10:15 Apresentação de ideias e formação de equipes 14:00 Checagem #1 e almoço 20:00 Checagem #2 e apresentações ✨O que é Autolab✨ Uma plataforma para Autoresearch. Autolab.ai executa seus experimentos de ML para você - agentes planejam, lançam e pontuam milhares de execuções de treinamento em paralelo, em suas GPUs, contra seus evals. ✨O que é Sundai✨ Sundai é a maior comunidade hacker de IA em Harvard e MIT, agora construindo grandes ideias semanais em SF. Todo domingo pedimos a cada participante que trabalhe em uma ideia aspiracional maior que a vida que sempre quis desenvolver. Um domingo de cada vez. Esta é sua chance de se impulsionar para o próximo nível. Realizamos 130+ hacks consecutivos nos últimos 2 anos - um para cada domingo sem parar. ✨O que é Maritime✨ Maritime.sh facilita a hospedagem de agentes de IA pessoais, aplicativos agentes e agentes especializados para grupos de usuários. Você pode construir um aplicativo onde cada usuário recebe seu próprio agente dedicado, gerenciado e hospedado através do Maritime, com ferramentas simples como o CLI e SDK da Maritime. ✨O que é E.env✨ E.env constrói ambientes RL que se auto-melhoram para ensinar habilidades gerais de pesquisa a LLMs a partir de tarefas de Pesquisa Quantitativa. Dados de mercado são uma ótima fonte de tarefas desafiadoras em ciência de dados e se auto-melhoram: à medida que os modelos negociam melhor, o mercado se torna mais eficiente, o que torna a negociação bem mais difícil novamente. E.env fornece ambientes RL para serviços de pós-treinamento e avaliação para agentes. ✨Nossa missão na Sundai ✨ "Empurrar os limites do que é possível fazer com IA em um dia." 1. Fazer os melhores hackers aprenderem a construir rapidamente com IA 2. Construir coisas que importam - medir em usuários $$$ / estrelas do github ⭐️ 3. Espalhar a Mentalidade Hacker ensinar as habilidades que aprendemos ✨Nossos Princípios✨ Construir. Lançar. Atalhos - Construir: O propósito da Sundai é reunir-se e construir grandes ideias. Todo domingo. - Lançar: sair do localhost. Implantar seus aprendizados como um webapp ou uma postagem e uma demonstração que funcione na internet. Vá por menos, para fazer mais. - Atalhos: Atalhos são um movimento engenhoso que um hacker faz para construir um sistema que funcione. Para construir rapidamente - você sempre precisa pensar em atalhos. ✨História de Hacking no MIT✨ https://www.sundai.foundation/about/hacker Termos de Participação: Ao participar deste evento, você concorda em cuidar e manter vigilância sobre o seguinte: - deixe a sala como a encontrou. Todas as lousas, cadeiras e mesas devem ser limpas e rearranjadas como você as encontrou. Todo o lixo deve estar na lixeira. - não deixe estranhos entrarem em qualquer prédio atrás de você onde a sundai esteja ocorrendo. se você ver alguém que não reconhece e que é suspeito, por favor, nos avise imediatamente. - use somente os espaços dedicados a um hack da sundai. se não tiver certeza - pergunte explicitamente. - seja respeitoso e atencioso com os outros que podem estar no prédio e que estão estudando ou trabalhando. - se não tiver certeza - pergunte sempre. Você concorda com essas regras ao comparecer ao evento. Por favor, leia os termos completos cuidadosamente aqui: https://tinyurl.com/sundaiterms