Codabench (ex Codalab) est une infrastructure de référence internationale, développée au LISN par les chercheurs d‘A&O et les ingénieurs d’ASARD. La plateforme est dédiée à l’évaluation d’algorithmes d’apprentissage automatique et héberge, gratuitement, des milliers de compétitions.

Programme

13h30 l Café d’accueil

14h l Présentation des plateformes Codalab et Codabench

• Introduction : Anne-Catherine Letournel, Ingénieure LISN, équipe ASARD

• La science avec Codalab et Codabench : Adrien Pavao, Contributeur, Docteur en informatique

• Infrastructure de production : Obada Haddad-Soussac, Ingénieur, LISN, équipe ASARD

• Building Together in Open Source: the Github community : Ihsan Ullah, Contributeur, Ingénieur

14h40 l Retours d’expérience d’organisateurs de compétitions

• “NeurIPS’24 experiment: LLM as an Author Checklist Assistant“ : Hieu Khuong, chercheur doctorant, LISN équipes GALAC-A&O

• “Organisation des campagnes d’évaluation multilingues en traitement automatique des langues avec Codabench – réseaux PARSEME et UniDive“ : Agata Savary, Professeure, LISN, équipe SEME

• “Évaluation du module Algorithmique Avancée de la dominante Info&Num à CentraleSupélec“ : Joanna Tomasik, professeur, LISN équipe GALaC

15h30 l Questions / Réponses et conclusion