Pluribus
Pluribus est un joueur de poker informatique utilisant l'intelligence artificielle, créé par le laboratoire d'IA de Facebook et l'Université Carnegie Mellon. Il joue au poker Texas hold'em sans limite et est le premier bot à battre des humains dans un jeu multijoueur complexe. Les développeurs ont publié leurs résultats en 2019, marquant une étape importante dans le domaine de l'intelligence artificielle et des systèmes de jeu.
Selon ses créateurs, développer une IA surhumaine pour le poker multijoueur constituait la dernière étape majeure restante dans le poker informatique avant Pluribus. Le système repose sur un apprentissage autonome hors ligne pour établir une stratégie de base, puis continue d'apprendre en temps réel pendant ses parties en ligne. La stratégie de base a été calculée en huit jours et coûterait environ 144 dollars à produire, un montant bien inférieur à celui des étapes marquantes précédentes de l'IA surhumaine, comme AlphaZero.
Approche technique
Dans l'IA, les jeux à somme nulle à deux joueurs (comme le heads-up hold'em) sont généralement résolus en approximant un équilibre de Nash ; cependant, cette approche ne fonctionne pas pour les jeux à trois joueurs ou plus. Pluribus utilise plutôt une approche qui manque de garanties théoriques solides, mais qui s'avère néanmoins efficace en pratique pour battre des joueurs humains. La conception du système s'inspire de l'apprentissage automatique et de l'apprentissage profond, bien qu'il ne repose pas sur un réseau de neurones de la même manière que de nombreux systèmes d'IA récents. Sa capacité d'apprentissage en temps réel lui permet de s'adapter aux tendances de ses adversaires pendant la partie, une caractéristique qui le distingue des bots de poker antérieurs.
Résultats et performances
Lors des compétitions, Pluribus a remporté en moyenne plus de 30 grosses blindes par partie. Face à cinq joueurs professionnels de poker, Pluribus a gagné en moyenne 5 dollars par main, avec des gains de 1 000 dollars par heure, ce que Facebook a décrit comme une marge de victoire décisive. Le bot utilise des stratégies non conventionnelles apprises par lui-même, comme éviter de suivre la grosse blinde et adopter des comportements de relance inhabituels, plus fréquemment que les joueurs humains experts. Ces stratégies peu orthodoxes se sont révélées efficaces contre des adversaires de haut niveau.
Réactions des experts
Parmi les joueurs experts, Jason Les a déclaré se sentir très impuissant, affirmant : « On a l'impression qu'il n'y a rien qu'on puisse faire pour gagner. » Chris Ferguson a commenté : « Pluribus est un adversaire très difficile à affronter. C'est vraiment difficile de le cerner. » Jimmy Chou a noté : « Chaque fois que je joue contre le bot, j'apprends quelque chose de nouveau que j'intègre à mon propre jeu. » Dans le Wall Street Journal, la rédactrice scientifique Daniela Hernandez a qualifié Pluribus de maître de la tromperie, une compétence humaine clé.
Contexte plus large et héritage
Le développement de Pluribus s'appuie sur des travaux antérieurs en poker informatique, notamment des bots de heads-up qui avaient déjà atteint des performances surhumaines dans les jeux à deux joueurs. Le succès au no-limit hold'em multijoueur a été considéré comme une percée majeure, car ce jeu implique des informations imparfaites, le bluff et des interactions stratégiques complexes entre plusieurs joueurs. L'approche utilisée par Pluribus, qui combine l'apprentissage autonome hors ligne et l'adaptation en temps réel, a influencé les recherches ultérieures sur l'IA de jeu et les systèmes multi-agents.
Code source et considérations éthiques
Après la victoire, les développeurs ont refusé de publier le code source, craignant qu'il ne soit utilisé à mauvais escient pour tricher subrepticement contre des joueurs humains lors de parties de poker en ligne. Cette décision a mis en lumière les préoccupations croissantes concernant l'utilisation abusive potentielle des systèmes d'IA avancés dans des contextes compétitifs et financiers. Le cas de Pluribus a été discuté dans le cadre de la sécurité de l'IA et du déploiement responsable d'algorithmes puissants, aux côtés d'autres systèmes notables développés par des organisations telles que Google DeepMind et OpenAI.
Références
- Publications de recherche du laboratoire d'IA de Facebook et de l'Université Carnegie Mellon (2019)
- Couverture du Wall Street Journal par Daniela Hernandez
- Déclarations des joueurs de poker professionnels Jason Les, Chris Ferguson et Jimmy Chou