신경 정보 처리 시스템 학회(NeurIPS로 약칭, 이전 명칭 NIPS)는 매년 12월에 개최되는 Machine learning 및 계산 신경과학 학회이다. ICLR 및 ICML과 함께 Machine learning 및 Artificial intelligence 연구 분야의 세 가지 주요 영향력 있는 학회 중 하나이다. 이 학회는 초청 강연 3일과 심사된 논문의 구두 발표 및 포스터 발표로 구성되며, 이후 워크숍과 대회가 이틀간 이어진다.
NeurIPS 회의는 1986년 캘리포니아 공과대학과 벨 연구소가 주최한 연례 초청제 스노우버드 신경망 컴퓨팅 회의에서 처음 제안되었다. 이는 생물학적 및 인공 신경망을 연구하는 연구자들을 위한 개방적이고 학제적인 모임으로 구상되었으며, 비공개 스노우버드 행사를 보완하는 역할을 했다. 첫 학회는 1987년 콜로라도주 덴버에서 정보 이론가 에드 포스너가 학회장, 학습 이론가 야세르 아부-모스타파가 프로그램 위원장을 맡아 개최되었다.
설립 및 초기
1987년 NeurIPS의 설립은 전신의 초청제 형식에서 의도적으로 벗어난 것이었다. 첫 회의는 IEEE가 후원했으며 공학, 신경과학, 통계학 등 다양한 분야의 연구자들을 끌어모았다. 초기 회의록은 순수 공학 중심 문제부터 생물학적 신경계의 계산 모델에 이르기까지 광범위한 연구를 반영했다. Machine learning 및 Artificial intelligence 분야가 성숙해짐에 따라 생물학적 연구와 공학 연구의 흐름은 갈라졌고, 2000년대에 이르러 학회 프로그램은 머신러닝, 통계학, AI 연구가 주를 이루게 되었다.
캘리포니아 공과대학의 정보 이론가 에드 포스너가 초대 학회장을, 야세르 아부-모스타파가 프로그램 위원장을 역임했다. 학회는 처음에는 1987년부터 2000년까지 콜로라도주 덴버에서 개최되었다. 이후 밴쿠버(2001–2010), 그라나다(2011), 레이크 타호(2012–2013)로 옮겨갔으며, 그 후 몇 년 동안 여러 국제 도시를 순회했다.
조직 역사
첫 NeurIPS 학회는 IEEE가 후원했다. 이후 회의는 에드 포스너가 설립한 NeurIPS 재단이 주최했다. 테런스 세즈노스키는 1993년 포스너가 사망한 이후 재단 회장을 맡아왔다. 이사회는 학회의 이전 총회장들로 구성된다.
학회 회의록은 1987년 미국 물리학회가 Neural Information Processing Systems라는 제목으로 처음 책 형태로 출판했다. 이후 권은 Morgan Kaufmann(1988–1993), MIT Press(1994–2004), Curran Associates(2005–현재)에서 Advances in Neural Information Processing Systems라는 제목으로 출판되었다.
명칭 및 개명
학회는 원래 "NIPS"로 약칭되었다. 2018년, 평론가들은 이 약어가 "nipples"라는 단어와 연관되어 분야 내 성차별을 조장할 수 있다고 비판했다. 이에 대응하여 조직 위원회는 2018년 11월 공식 약칭을 "NeurIPS"로 변경했다.
학회 형식 및 범위
NeurIPS는 매년 개최되며 초청 강연, 구두 발표, 심사된 논문의 포스터 세션으로 구성되고, 이후 워크숍과 대회가 이어진다. ICLR 및 ICML과 함께 머신러닝과 인공지능 연구를 발표하는 최상위 학회로 간주된다.
학회의 주제 범위는 원래 신경망에 초점을 맞춘 것에서 인지과학, Computer vision, Natural language processing, 통계학으로 확장되었다. 약 2012년 이후 Deep learning의 부활로 NeurIPS는 이미지 인식, 언어 번역, 게임 시스템의 돌파구를 포함한 신경망 아키텍처 및 강화학습 발전의 중심 학회로 자리 잡았다.
명명 강연
NeurIPS는 저명한 연구자를 기리기 위해 두 개의 명명 강연을 운영한다. NeurIPS 이사회가 도입한 포스너 강연은 창립자 에드 포스너를 기린다. 역대 포스너 강연자는 다음과 같다:
- 2010: 마이클 조던, 리치 서튼
- 2011: 토마스 디테리히, 테리 세즈노스키
- 2012: 다프네 콜러, 피터 데이안
- 2013: 요슈아 벤지오, 주빈 가라마니
- 2014: 얀 르쿤, 피터 데이안
- 2015: 주빈 가라마니, 요슈아 벤지오
- 2016: 마이클 컨스
- 2017: 존 플랫
- 2018: 조엘 피노
- 2019: 요슈아 벤지오
- 2020: 피터 바틀렛
2015년 도입된 브레이먼 강연은 1994년부터 2005년까지 NeurIPS 이사회에서 활동한 통계학자 레오 브레이먼을 기린다. 역대 강연자로는 수잔 홈즈(2016), 데이비드 스피겔할터(2018), 엠마누엘 칸데스(2022), 아르노 두세(2024)가 있다.
심사 일관성 실험
2014년, 프로그램 위원장은 모든 제출물의 10%를 복제하여 별도의 심사자에게 보내는 동료 심사 과정 테스트를 실시했다. 결과는 약 60%의 결정이 일관적이었으며, 여러 연구자는 이를 심사 결과의 상당한 임의성의 증거로 해석했다. 존 랭포드는 순수 무작위 과정이 약 78%의 불일치를 산출할 것이므로 관찰된 60%는 완벽한 일치보다 무작위에 가깝다고 지적했다. 이 실험은 NeurIPS 2021에서 반복되었으며, 비슷한 결과가 나왔다: 복제된 제출물의 23%가 다른 수락/거절 결정을 받았고, 수락된 논문의 50.6%는 다른 심사 그룹에서 거절되었을 것이다.
영향 및 유산
수십 년의 역사를 통해 NeurIPS는 Artificial intelligence 연구에서 영향력이 큰 세 가지 주요 학회 중 하나가 되었다. 더 빠른 하드웨어와 더 큰 데이터셋으로 가능해진 2010년대 초반 이후의 Deep learning 부활은 이 학회를 컴퓨터 비전, 자연어 처리, 강화학습 발전의 중심 학회로 만들었다. NeurIPS는 또한 Black in AI(2017) 및 Queer in AI(2016)와 같은 친화 그룹을 통해 커뮤니티 다양성 육성에 역할을 해왔다.
명명 강연
NeurIPS 이사회는 창립자 에드 포스너를 기리기 위해 포스너 강연을 설립했으며, 2015년까지 매년 두 명의 수상자에게 수여되었다. 수상자에는 조시 테넨바움(2012), 베른하르트 쇨코프(2017), 얀 르쿤(2016)이 포함된다. 브레이먼 강연은 2015년 통계학자 레오 브레이먼의 이름을 따서 도입되었으며, 엠마누엘 칸데스(2022)와 아르노 두세(2024)를 포함한 연구자에게 수여되었다.
동료 심사 일관성
2014년, 프로그램 위원장은 제출물의 10%를 복제하여 별도의 심사자를 통해 보내는 일관성 실험을 수행했다. 결과는 심사 과정의 상당한 임의성을 나타냈으며, 추정 불일치율은 약 60%로, 순수 무작위 결정 과정에서 기대되는 약 78%와 비교되었다. NeurIPS 2021의 후속 실험에서는 복제된 제출물의 23%가 다른 수락/거절 결정을 받았고, 수락된 논문의 절반 이상이 재심사에서 거절되었을 것임을 발견했다.
장소 및 성장
1987년부터 2000년까지 학회는 덴버에서 개최되었다. 이후 밴쿠버(2001–2010), 그라나다(2011), 레이크 타호(2012–2013), 몬트리올(2014–2015), 바르셀로나(2016), 롱비치(2017), 몬트리올(2018), 밴쿠버(2019)로 옮겨갔다. 2020년과 2021년 판은 COVID-19 팬데믹으로 인해 가상으로 개최되었다. 이후 장소로는 뉴올리언스(2022), 뉴올리언스(2023), 밴쿠버(2024)가 포함되었다. 향후 계획된 장소로는 샌디에이고(2025)와 시드니(2026)가 있다.