캐나다 고등연구소(CIFAR)는 현대 인공지능 발전에 핵심적인 역할을 해온 캐나다 기반의 글로벌 연구 기관이다. 1982년에 설립된 CIFAR는 자연과학, 사회과학, 인문학 전반에 걸친 협력적이고 다학제적인 연구 네트워크를 지원한다. 특히 기계 학습 및 뇌 프로그램과 범캐나다 인공지능 전략을 포함한 인공지능 이니셔티브는 기계 학습과 심층 학습 분야의 선도 연구자들을 전 세계 기관과 연결해 왔다.
CIFAR의 AI 관련 작업은 학제 간 협력을 조성해 온 오랜 전통에서 비롯되었다. 이 기관의 모델은 다양한 분야의 연구자들을 모아 근본적인 질문을 다루도록 하며, 그 AI 프로그램은 학계 연구를 토론토 대학교 및 기타 캐나다 기관의 광범위한 생태계와 연결하면서 해당 분야에서 가장 영향력 있는 프로그램 중 하나가 되었다.
기계 학습 및 뇌 프로그램
2004년에 설립된 기계 학습 및 뇌 프로그램은 원래 신경 계산 및 적응 지각으로 알려져 있었다. 이 프로그램은 제프리 힌튼이 이끌었으며, 요슈아 벤지오와 얀 르쿤을 포함한 연구자들과 신경과학자, 컴퓨터 과학자, 생물학자, 전기 공학자, 물리학자, 심리학자들을 한데 모았다. 프로그램의 협력 구조는 구성원들이 학문 간 아이디어를 공유할 수 있게 했으며, 이는 신경망 연구가 널리 받아들여지지 않던 시기에 이를 발전시키는 데 결정적이었다.
프로그램 구성원들은 인간 지능을 모방하는 컴퓨팅 시스템을 개발하여 패턴 인식 및 학습과 같은 작업에서 신경망의 잠재력을 확인했다. 이 작업은 이후 심층 학습의 많은 돌파구를 위한 기초를 마련했다. 2019년, 컴퓨터 기계 협회는 심층 신경망을 컴퓨팅의 핵심 구성 요소로 만든 개념적 및 공학적 기여로 힌튼, 벤지오, 르쿤에게 2018년 ACM A.M. 튜링상을 수여했다.
이 프로그램은 잔차 네트워크 아키텍처, 다중 헤드 주의 메커니즘, 손실 함수와 같은 주제를 아우르는 연구로 계속 진화하고 있다. 졸업생과 관련 인사들은 트랜스포머 모델 및 대규모 언어 모델 시스템을 포함한 주요 AI 발전에 기여해 왔다.
범캐나다 인공지능 전략
2017년, 캐나다 정부는 CIFAR에 AI 연구와 인재를 지원하기 위한 국가 이니셔티브인 범캐나다 인공지능 전략을 개발하고 주도하도록 요청했다. 연방 정부는 CIFAR의 운영에 5년간 3,500만 달러를 투자하고 전략에 1억 2,500만 달러를 발표했다. 이 이니셔티브는 연구 자금 지원, 신규 연구자 훈련, 학계와 산업계 연결을 통해 캐나다를 AI 분야의 글로벌 리더로 자리매김하는 것을 목표로 했다.
이 전략은 토론토의 벡터 연구소, 몬트리올의 밀라, 에드먼턴의 아미이를 포함한 캐나다 주요 도시에 AI 연구소 설립을 지원했다. 이 연구소들은 심층 학습, 강화 학습, 생성형 AI와 같은 분야의 연구 허브가 되어 전 세계에서 인재를 끌어모았다.
2022년, CIFAR는 10년간 최대 2억 800만 달러의 연방 지원으로 전략의 2단계를 발표했다. 이 단계는 연구를 응용으로 전환하고, 윤리적 및 사회적 영향을 다루며, 글로벌 AI 환경에서 캐나다의 경쟁력을 유지하는 데 초점을 맞춘다.
연구 프로그램 및 운영
2023년 기준으로 CIFAR는 기계 학습 및 뇌 프로그램을 포함한 15개 주요 다학제 분야에서 연구를 지원한다. 다른 프로그램은 양자 정보 과학, 뇌, 마음 및 의식, 미래 번영과 같은 주제를 다룬다. 기관의 직원은 21개국과 140개 이상의 기관에서 온 400명 이상의 연구자를 지원하며, 약 절반이 캐나다에 기반을 두고 있다.
CIFAR의 거버넌스는 이사회 의장과 이사회에 책임을 지는 사장 겸 CEO를 포함한다. 스티븐 투프는 2022년 11월에 사장 겸 CEO가 되었으며, 2012년부터 2022년까지 재임한 앨런 번스타인의 뒤를 이었다. 이르판 라우지가 이사회 의장을 맡고 있으며, 재클린 코어너와 앤 맥렐런이 부의장을 공동으로 맡고 있다. 기관은 정부, 파트너십, 민간 부문 소스 및 투자 수익에서 자금을 받으며, 2018년 연간 예산은 3,000만 달러였다.
역사적 맥락과 영향
CIFAR는 1982년 토론토 대학교의 영어 교수인 존 레일이 1978년부터 지원을 모으기 시작한 노력에 따라 설립되었다. 유아 발달 연구를 하는 의사이자 연구원인 프레이저 머스타드는 1982년부터 1996년까지 초대 사장으로 재임했다. 기관의 초기 작업에는 인구 건강에 대한 영향력 있는 연구가 포함되었으며, 1994년 출판물은 사회경제적 지위를 건강의 가장 영향력 있는 결정 요인으로 식별했다.
AI 프로그램은 고위험, 고수익 연구를 지원해 온 CIFAR의 역사를 기반으로 구축되었다. 2004년에 시작된 신경 계산 및 적응 지각 프로그램은 처음에는 비전통적인 것으로 간주되었지만, 그 성공은 심층 학습을 주류 연구 분야로 정당화하는 데 도움이 되었다. 프로그램의 영향력은 학계를 넘어 확장되었으며, 많은 전 구성원이 오픈AI, 구글 딥마인드, 앤트로픽과 같은 회사의 산업 노력에 기여했다.
CIFAR의 더 넓은 영향은 물리학에서 경제학에 이르는 분야에서 설립 이후 23명의 노벨상 수상자와의 연관성을 포함한다. 기관의 다양한 학문 분야 연구자들을 모으는 모델은 전통적인 학문 구조에서는 발생하지 않았을 돌파구를 가능하게 한 것으로 평가받고 있다.
주요 인물과 유산
CIFAR는 프레이저 머스타드(1982-1996), J. 스테판 뒤프레(1996-2000), 샤비바 호셰크(2001-2012), 앨런 번스타인(2012-2022)을 포함한 일련의 주목할 만한 사장들에 의해 이끌어져 왔다. 2023년 기준 현재 사장은 스티븐 투프이다. 기관의 AI 프로그램은 심층 학습의 선구자로 널리 인정받는 제프리 힌튼, 요슈아 벤지오, 얀 르쿤과 같은 핵심 인물들에 의해 형성되었다.
CIFAR AI 연구의 유산은 프로그램 내에서 개발된 기술의 광범위한 채택에서 분명하다. 배치 정규화, 드롭아웃, 계층 정규화와 같은 개념은 이제 기계 학습 실무에서 표준이 되었다. 신경과학과 컴퓨터 과학 간의 협력에 대한 기관의 강조는 컴퓨터 비전에서 자연어 처리에 이르기까지 연구자들이 인공지능 문제에 접근하는 방식을 영향을 주었다.
CIFAR는 연구 프로그램과 국가 전략을 통해 AI 환경을 계속 형성하고 있으며, 생성형 AI 및 기타 신흥 기술의 기술적 과제와 사회적 영향을 모두 다루는 작업을 지원하고 있다.