Pluribus는 Facebook의 AI 연구소와 카네기 멜론 대학이 구축한 인공지능을 사용하는 컴퓨터 포커 플레이어입니다. 이는 노리밋 텍사스 홀덤 변형 게임을 플레이하며, 복잡한 멀티플레이어 대회에서 인간을 이긴 최초의 봇입니다. 개발자들은 2019년에 그 결과를 발표했으며, 이는 인공지능 및 게임 플레이 시스템 분야에서 중요한 이정표를 의미합니다.
개발자들에 따르면, 멀티플레이어 포커를 위한 초인간적 AI를 개발하는 것은 Pluribus 이전에 컴퓨터 포커에서 널리 인정된 주요 남은 이정표였습니다. 이 시스템은 오프라인 자기 대결을 통해 기본 전략을 구축하지만, 온라인 플레이 중에도 실시간으로 계속 학습합니다. 기본 전략은 8일 만에 계산되었으며, 시장 가격으로는 약 144달러의 비용이 들었는데, 이는 AlphaZero와 같은 당대의 초인간적 게임 플레이 이정표보다 훨씬 적은 비용입니다.
기술적 접근
AI에서 2인 제로섬 게임(예: 헤즈업 홀덤)은 일반적으로 내시 균형 전략을 근사화하여 승리하지만, 이 접근 방식은 3인 이상의 게임에서는 작동하지 않습니다. Pluribus는 대신 강력한 이론적 보장은 부족하지만 경험적으로 인간 플레이어를 물리치는 데 잘 작동하는 것으로 보이는 접근 방식을 사용합니다. 시스템의 설계는 머신 러닝 및 딥 러닝의 기술을 활용하지만, 많은 현대 AI 시스템과 같은 방식으로 신경망에 의존하지는 않습니다. 실시간 학습 능력 덕분에 플레이 중 상대의 경향에 적응할 수 있으며, 이는 이전 포커 봇과 구별되는 특징입니다.
성능 및 결과
대회 전반에 걸쳐 Pluribus는 게임당 평균 30밀리 빅 블라인드 이상을 획득했습니다. 다섯 명의 프로 포커 플레이어를 상대로 노리밋 홀덤을 플레이하면서 Pluribus는 핸드당 평균 5달러, 시간당 1,000달러의 수익을 올렸으며, Facebook은 이를 결정적인 승리 격차로 설명했습니다. 봇의 자가 학습 플레이 스타일은 림핑(빅 블라인드 콜)을 피하고, 인간 전문가보다 더 자주 돈크 베팅(라운드를 콜로 끝내고 다음 라운드를 베팅으로 시작)을 사용합니다. 이러한 비전통적 전략은 최고 수준의 상대에게 효과적임이 입증되었습니다.
전문가들의 반응
전문 포커 플레이어 중 Jason Les는 매우 절망감을 느꼈다고 밝히며 "승리하기 위해 할 수 있는 일이 없다는 느낌이 든다"고 말했습니다. Chris Ferguson은 "Pluribus는 상대하기 매우 어려운 상대입니다. 어떤 핸드에서든 그를 특정하기가 정말 어렵습니다"라고 말했습니다. Jimmy Chou는 "봇을 플레이할 때마다 내 게임에 통합할 새로운 무언가를 배우는 느낌이 듭니다"라고 언급했습니다. 월스트리트 저널에서 과학 편집자 Daniela Hernandez는 Pluribus를 인간의 핵심 기술인 속임수에서 진보된 존재로 특징지었습니다.
더 넓은 맥락과 유산
Pluribus의 개발은 2인 게임에서 이전에 초인간적 성능을 달성한 헤즈업 봇을 포함한 컴퓨터 포커의 초기 작업을 기반으로 구축되었습니다. 멀티플레이어 노리밋 홀덤에서의 성공은 게임이 불완전 정보, 블러핑, 그리고 여러 플레이어 간의 복잡한 전략적 상호작용을 포함하기 때문에 주요 돌파구로 간주되었습니다. Pluribus가 사용한 접근 방식은 오프라인 자기 대결과 실시간 적응을 결합한 것으로, 게임 플레이 AI 및 다중 에이전트 시스템의 후속 연구에 영향을 미쳤습니다.
소스 코드 및 윤리적 고려 사항
승리 이후 개발자들은 소스 코드 공개를 거부했는데, 이는 온라인 경기에서 인간 포커 플레이어를 상대로 은밀하게 부정 행위를 하는 데 오용될 것을 우려했기 때문입니다. 이 결정은 경쟁 및 금융 맥락에서 고급 AI 시스템의 잠재적 오용에 대한 증가하는 우려를 부각시켰습니다. Pluribus의 사례는 Google DeepMind 및 OpenAI와 같은 조직이 개발한 다른 주목할 만한 시스템과 함께 AI 안전 및 강력한 알고리즘의 책임 있는 배포 맥락에서 논의되었습니다.
참고 문헌
- Facebook AI 연구소 및 카네기 멜론 대학 연구 출판물 (2019)
- Daniela Hernandez의 The Wall Street Journal 보도
- 프로 포커 플레이어 Jason Les, Chris Ferguson, Jimmy Chou의 성명