Groupe de Lecture (+🧋): Senior SWE-Bench
Description
Rejoignez le Groupe de Lecture de Snorkel AI pour une présentation sur Senior SWE-Bench, un benchmark open-source évaluant les agents de codage sur des tâches du monde réel.
Points forts
Présentation par le chercheur principal Henry Ehrenberg sur Senior SWE-Bench. Discussion sur les agents de codage évalués en tant qu'ingénieurs seniors. Introduction aux agents de validation pour une notation fiable. Tâches issues de véritables pull requests avec une enquête de temps d'exécution significative. Scores des juges sur la minimalité du code et le savoir-faire. Analyse des performances des meilleurs modèles sur des tâches de niveau senior. Le benchmark comprend 100 tâches provenant de 12 véritables dépôts. Benchmark open-source et compatible Harbor. Collaboration avec Princeton et UW–Madison. Thé au boba et autres rafraîchissements fournis.
Lieu de l`événement
Faites savoir à votre réseau que vous y allez
Partagez cet événement pour engager des conversations, inviter des collègues et vous connecter avant qu`il commence.
Événements similaires
Arrêtez de créer des agents IA – Commencez à développer des COMPÉTENCES IA. Un tutoriel complet, mer. 1er juillet · 17h30 HAE par Tampa Bay Biotechicon.
Collab UX-Ai : rencontre
Table ronde communautaire : IA, agents, compétences et MCP | DenverScript juin 2026
Rencontre IA (juillet) : GenAI LLMs et agents
Streaming/ Tribe #26 - Les startups peuvent-elles devenir autonomes grâce à l'IA ?
Construire une entreprise dotée d'une IA Mardi 23 juin · 17h30 EDT par Entrepreneurs Learning & Growth Hub.
Lancement de la série d'études estivales sur l'IA
Introduction à l'ingénierie de l'IA
7 places restantes AI Happy Hour Mar, 23 juin · 19:00 EDT par AI Club 3 participants
La Conférence de l'Intelligence Artificielle Souterraine
Groupe de réflexion sur l'IA. Apprenez à gagner de l'argent avec l'IA