17 février 2025
L’IA à la rencontre des neurosciences : retour sur l’atelier Simons-IVADO
Par Danilo Bzdok, professeur à l‘Université McGill – codirecteur scientifique à IVADO, Programmes de recherche et relations avec les membres académiques
En parcourant les couloirs de l’Institut Simons de Berkeley la semaine dernière, j’ai été frappé par la remarquable convergence des esprits – neuroscientifiques, linguistes, chercheuses et chercheurs en IA, tous rassemblés pour aborder des questions fondamentales sur le langage et l’intelligence. J’étais ravi de représenter IVADO lors de l‘atelier sur les grands modèles de langages (LLM), les sciences cognitives, la linguistique et les neurosciences à l’Institut Simons.
En tant que codirecteur scientifique d’IVADO et chercheur travaillant à l’intersection de l’IA et des neurosciences, j’ai participé à des discussions passionnantes avec des experts de toutes les disciplines. Cet événement marquait le premier de trois ateliers du semestre thématique en cours sur les LLM, co-organisé et cofinancé par l’Institut Simons et IVADO.
Composée de membres de la communauté universitaire provenant de partout au Canada, la délégation IVADO a nourri des conversations importantes, explorant comment les LLM redéfinissent notre compréhension du langage, de la cognition et de l’intelligence.
Thèmes clés et perspectives
L’atelier a fourni une plateforme d’exploration interdisciplinaire sur la manière dont les LLM remettent en question et éclairent notre compréhension du langage, du cerveau et de l’intelligence humaine. Les discussions ont porté sur des questions fondamentales telles que :
- L’écart d’apprentissage entre l’homme et les LLM – Contrairement aux enfants, les LLM actuels nécessitent des quantités massives de données pour apprendre efficacement, mettant en lumière une divergence persistante entre les systèmes d’intelligence biologique et artificielle.
- Les LLM modélisent-ils véritablement le langage humain ? – Les intervenants ont débattu pour établir si les LLM saisissent les modèles de texte humain de manière significative ou s’ils ne font qu’approximer des séquences statistiques.
- L’influence de Chomsky – Les théories de Noam Chomsky ont été revisitées, les LLM venant à la fois confirmer et remettre en question ses idées fondatrices en linguistique.
- Cartographie des représentations LLM dans le cerveau – Certains mécanismes neuronaux des LLM, comme l’encodage positionnel, présentent des parallèles intrigants avec la manière dont les populations de neurones peuvent traiter l’information dans le cerveau humain. Toutefois, il reste difficile de déterminer avec précision comment des concepts sémantiques distincts sont représentés, même à l’aide d’enregistrements neuronaux directs.
- Modèles d’IA émergents – Les chercheurs ont évalué les capacités de DeepSeek R1, un LLM chinois récent, comparant ses forces et ses faiblesses avec les modèles occidentaux comme GPT-4, Gemini, Llama et Grok, sans que l’on comprenne très bien comment les efforts financiers consentis pour ces solutions se comparent en fin de compte.
- Risques de sécurité et de sûreté – Les risques posés par les LLM continuent d’évoluer, certains experts suggérant que des systèmes d’IA auxiliaires pourraient jouer un rôle dans l’audit ou l’affinage des sorties des modèles. Le potentiel de comportements émergents inattendus lorsque les LLM interagissent avec des contraintes minimales a également été soulevé en tant qu’élément préoccupant.
Un environnement collaboratif unique
Organisé à l’Institut Simons de l’Université de Californie à Berkeley, un centre de premier plan pour la recherche en informatique théorique, l’atelier a bénéficié de la forte tradition de l’Institut en matière de collaboration interdisciplinaire. Les longues pauses et les discussions ouvertes ont multiplié les occasions d’échanger les connaissances entre disciplines, confirmant ainsi l’importance de créer des ponts entre les perspectives des neurosciences, des sciences cognitives et de l’IA.
Perspectives : rejoignez-nous pour les prochains ateliers.
Cet atelier n’était que le début. IVADO accepte toujours les candidatures de membres de la communauté universitaire canadienne intéressés à participer aux deux prochains ateliers du semestre thématique.
Que vous soyez chercheur ou chercheuse dans une université canadienne avec une expertise pertinente et un intérêt pour les LLM, nous vous encourageons à vous inscrire sur notre site web dans les semaines à venir : Semestre thématique d’IVADO sur les grands modèles de langage et les transformeurs.
Restez à l’affût pour de plus amples informations et merci à toutes les personnes participantes qui ont contribué à cet événement stimulant!