La Conférence sur les systèmes de traitement de l'information neuronale (abrégée NeurIPS, anciennement NIPS) est une conférence sur l'apprentissage automatique et les neurosciences computationnelles tenue chaque année en décembre. Avec ICLR et ICML, c'est l'une des trois principales conférences à fort impact dans la recherche en apprentissage automatique et en intelligence artificielle. La conférence comprend trois jours de conférences invitées ainsi que des présentations orales et par affiches de documents évalués par les pairs, suivis de deux jours d'ateliers et de compétitions.
La réunion NeurIPS a été proposée pour la première fois en 1986 lors de la réunion annuelle Snowbird sur les réseaux neuronaux pour le calcul, organisée par le California Institute of Technology et les laboratoires Bell. Elle a été conçue comme une réunion interdisciplinaire ouverte pour les chercheurs étudiant les réseaux neuronaux biologiques et artificiels, complétant l'événement privé de Snowbird. La première conférence a eu lieu en 1987 à Denver, Colorado, avec le théoricien de l'information Ed Posner comme président de la conférence et le théoricien de l'apprentissage Yaser Abu-Mostafa comme président du programme.
Fondation et premières années
La fondation de NeurIPS en 1987 a marqué une rupture délibérée avec le format sur invitation de son prédécesseur. La réunion inaugurale a été parrainée par l'IEEE et a attiré des chercheurs de divers domaines, notamment l'ingénierie, les neurosciences et les statistiques. Les premiers actes reflétaient un large éventail de travaux, allant de problèmes purement orientés vers l'ingénierie à des modèles computationnels de systèmes nerveux biologiques. À mesure que les domaines de l'apprentissage automatique et de l'intelligence artificielle ont mûri, les courants de recherche biologique et d'ingénierie ont divergé, et dans les années 2000, le programme de la conférence était dominé par l'apprentissage automatique, les statistiques et la recherche en IA.
Ed Posner, théoricien de l'information au California Institute of Technology, a été le premier président de la conférence, et Yaser Abu-Mostafa a agi comme président du programme. La conférence s'est initialement tenue à Denver, Colorado, de 1987 à 2000. Ensuite, elle a déménagé à Vancouver (2001-2010), puis à Grenade (2011) et à Lake Tahoe (2012-2013), avant de tourner entre plusieurs villes internationales dans les années suivantes.
Historique organisationnel
La première conférence NeurIPS a été parrainée par l'IEEE. Les réunions suivantes ont été organisées par la fondation NeurIPS, établie par Ed Posner. Terrence Sejnowski a été président de la fondation depuis la mort de Posner en 1993. Le conseil d'administration est composé d'anciens présidents généraux de la conférence.
Les actes de la conférence ont d'abord été publiés sous forme de livre par l'American Institute of Physics en 1987 sous le titre Neural Information Processing Systems. Les volumes suivants ont été publiés par Morgan Kaufmann (1988-1993), MIT Press (1994-2004) et Curran Associates (2005-présent) sous le titre Advances in Neural Information Processing Systems.
Nom et renommage
La conférence était à l'origine abrégée en « NIPS ». En 2018, des commentateurs ont critiqué l'acronyme pour son association avec le mot « mamelons » et ont soutenu qu'il pourrait encourager le sexisme dans le domaine. En réponse, le conseil d'organisation a changé l'abréviation officielle en « NeurIPS » en novembre 2018.
Format et portée de la conférence
NeurIPS est tenue chaque année et comprend des conférences invitées, des présentations orales et des sessions d'affiches pour les documents évalués par les pairs, suivies d'ateliers et de compétitions. Avec ICLR et ICML, elle est considérée comme un lieu de publication de premier plan pour la recherche en apprentissage automatique et en intelligence artificielle.
La portée thématique de la conférence s'est élargie de son focus initial sur les réseaux neuronaux pour inclure les sciences cognitives, la vision par ordinateur, le traitement du langage naturel et les statistiques. La résurgence de l'apprentissage profond depuis environ 2012 a positionné NeurIPS comme un lieu central pour les avancées dans les architectures de réseaux neuronaux et l'apprentissage par renforcement, y compris les percées dans la reconnaissance d'images, la traduction linguistique et les systèmes de jeu.
Conférences nommées
NeurIPS organise deux conférences nommées en l'honneur de chercheurs distingués. La conférence Posner, introduite par le conseil NeurIPS, honore le fondateur Ed Posner. Les conférenciers Posner passés incluent :
- 2010 : Michael Jordan et Rich Sutton
- 2011 : Thomas Dietterich et Terry Sejnowski
- 2012 : Daphne Koller et Peter Dayan
- 2013 : Yoshua Bengio et Zoubin Ghahramani
- 2014 : Yann LeCun et Peter Dayan
- 2015 : Zoubin Ghahramani et Yoshua Bengio
- 2016 : Michael Kearns
- 2017 : John Platt
- 2018 : Joelle Pineau
- 2019 : Yoshua Bengio
- 2020 : Peter Bartlett
La conférence Breiman, introduite en 2015, honore le statisticien Leo Breiman, qui a siégé au conseil NeurIPS de 1994 à 2005. Les conférenciers passés incluent Susan Holmes (2016), David Spiegelhalter (2018), Emmanuel Candes (2022) et Arnaud Doucet (2024).
Expériences de cohérence de l'examen
En 2014, les présidents du programme ont dupliqué 10 % de toutes les soumissions et les ont envoyées à des examinateurs séparés, un test du processus d'évaluation par les pairs. Les résultats ont montré qu'environ 60 % des décisions étaient cohérentes, ce que plusieurs chercheurs ont interprété comme une preuve d'arbitraire substantiel dans le résultat de l'examen. John Langford a noté qu'un processus purement aléatoire produirait environ 78 % d'incohérence, donc les 60 % observés étaient plus proches du hasard que d'un accord parfait. L'expérience a été répétée à NeurIPS 2021, avec des résultats similaires : 23 % des soumissions dupliquées ont reçu des décisions d'acceptation/refus différentes, et 50,6 % des documents acceptés auraient été rejetés sous un groupe d'examen différent.
Impact et héritage
Au cours de sa longue histoire, NeurIPS est devenue l'une des trois principales conférences à fort impact dans la recherche en intelligence artificielle. La résurgence de l'apprentissage profond depuis le début des années 2010, rendue possible par du matériel plus rapide et des ensembles de données plus grands, a fait de la conférence un lieu central pour les avancées en vision par ordinateur, traitement du langage naturel et apprentissage par renforcement. NeurIPS a également joué un rôle dans la promotion de la diversité communautaire grâce à des groupes d'affinité tels que Black in AI (2017) et Queer in AI (2016).
Conférences nommées
Le conseil NeurIPS a établi la conférence Posner en l'honneur du fondateur Ed Posner ; elle a été présentée à deux lauréats par an jusqu'en 2015. Les récipiendaires ont inclus Josh Tenenbaum (2012), Bernhard Schölkopf (2017) et Yann LeCun (2016). La conférence Breiman a été introduite en 2015, nommée d'après le statisticien Leo Breiman, et a été décernée à des chercheurs incluant Emmanuel Candes (2022) et Arnaud Doucet (2024).
Cohérence de l'examen par les pairs
En 2014, les présidents du programme ont mené une expérience de cohérence en dupliquant 10 % des soumissions et en les envoyant à des examinateurs séparés. Les résultats ont indiqué un arbitraire significatif dans le processus d'examen, avec une incohérence estimée d'environ 60 %, par rapport aux environ 78 % attendus d'un processus de décision purement aléatoire. Une expérience de suivi à NeurIPS 2021 a trouvé que 23 % des soumissions dupliquées ont reçu des décisions d'acceptation/refus différentes, et plus de la moitié des documents acceptés auraient été rejetés sous un nouvel examen.
Lieux et croissance
De 1987 à 2000, la conférence s'est réunie à Denver. Elle a ensuite déménagé à Vancouver (2001-2010), Grenade (2011), Lake Tahoe (2012-2013), Montréal (2014-2015), Barcelone (2016), Long Beach (2017), Montréal (2018) et Vancouver (2019). Les éditions 2020 et 2021 ont été tenues virtuellement en raison de la pandémie de COVID-19. Les lieux suivants ont inclus La Nouvelle-Orléans (2022), La Nouvelle-Orléans (2023) et Vancouver (2024). Les lieux futurs prévus incluent San Diego (2025) et Sydney (2026).