加拿大高等研究院(CIFAR)是一家总部位于加拿大的全球研究组织,在近代人工智能的发展中发挥了核心作用。CIFAR成立于1982年,支持跨越自然科学、社会科学和人文学科的协作性多学科研究网络。其人工智能倡议,特别是“机器与大脑中的学习”项目以及泛加拿大人工智能战略,将机器学习和深度学习领域的顶尖研究人员与全球机构联系起来。
CIFAR与人工智能相关的工作源于其长期倡导跨学科合作的传统。该组织的模式汇集了来自不同领域的研究人员以解决基础性问题,其人工智能项目已成为该领域最具影响力的项目之一,将学术研究与多伦多大学及其他加拿大机构的更广泛生态系统联系起来。
机器与大脑中的学习项目
“机器与大脑中的学习”项目成立于2004年,最初名为“神经计算与自适应感知”。该项目由杰弗里·辛顿领导,汇集了包括约书亚·本吉奥和杨·勒昆在内的研究人员,以及神经科学家、计算机科学家、生物学家、电气工程师、物理学家和心理学家。该项目的协作结构使成员能够跨学科交流思想,这在神经网络研究尚未被广泛接受的时期,对推动其发展至关重要。
项目成员开发了模仿人类智能的计算系统,证实了神经网络在模式识别和学习等任务中的潜力。这项工作为后续深度学习的许多突破奠定了基础。2019年,计算机协会授予辛顿、本吉奥和勒昆2018年度ACM A.M.图灵奖,以表彰他们在概念和工程上的贡献,这些贡献使深度神经网络成为计算的关键组成部分。
该项目持续发展,研究范围涵盖残差网络架构、多头注意力机制和损失函数等主题。其校友和附属人员已为包括Transformer模型和大型语言模型系统在内的主要人工智能发展做出了贡献。
泛加拿大人工智能战略
2017年,加拿大政府委托CIFAR制定并领导泛加拿大人工智能战略,这是一项支持人工智能研究和人才的国家倡议。联邦政府投资3500万加元用于CIFAR的运营,并宣布为该战略投入1.25亿加元。该倡议旨在通过资助研究、培训新研究人员以及连接学术界与工业界,将加拿大定位为全球人工智能领域的领导者。
该战略支持在加拿大主要城市建立人工智能研究所,包括多伦多的Vector Institute、蒙特利尔的Mila和埃德蒙顿的Amii。这些研究所已成为深度学习、强化学习和生成式人工智能等领域的研究中心,吸引了来自世界各地的顶尖人才。
2022年,CIFAR宣布了该战略的第二阶段,获得联邦政府最高2.08亿加元、为期十年的支持。这一阶段侧重于将研究转化为应用、解决伦理和社会影响,并保持加拿大在全球人工智能格局中的竞争地位。
研究项目与运营
截至2023年,CIFAR支持15个主要多学科领域的研究,包括“机器与大脑中的学习”项目。其他项目涵盖量子信息科学、大脑、心智与意识,以及未来繁荣等主题。该组织的员工支持来自21个国家和140多个机构的400多名研究人员,其中约一半位于加拿大。
CIFAR的治理结构包括一位总裁兼首席执行官,向主席和董事会负责。斯蒂芬·图普于2022年11月出任总裁兼首席执行官,接替了2012年至2022年间任职的艾伦·伯恩斯坦。伊尔凡·拉吉担任董事会主席,杰奎琳·科尔纳和安妮·麦克莱伦担任副主席。该组织获得来自政府、合作伙伴、私营部门来源和投资收益的资金,2018年的年度预算为3000万加元。
历史背景与影响
CIFAR成立于1982年,此前多伦多大学英语教授约翰·莱尔勒自1978年起开始争取支持。弗雷泽·穆斯塔德是一位医学博士,也是幼儿发展领域的研究人员,于1982年至1996年间担任创始总裁。该组织的早期工作包括对人口健康的有影响力的研究,1994年的一份出版物将社会经济地位确定为健康最具影响力的决定因素。
人工智能项目建立在CIFAR支持高风险、高回报研究的历史之上。神经计算与自适应感知项目始于2004年,最初被认为非常规,但其成功帮助深度学习成为主流研究领域。该项目的影响力超越了学术界,许多前成员为OpenAI、Google DeepMind和Anthropic等公司的行业工作做出了贡献。
CIFAR的更广泛影响包括自成立以来与23位诺贝尔奖得主的关联,涵盖从物理学到经济学的领域。该组织汇集不同学科研究人员的模式被认为促成了在传统学术结构中可能不会发生的突破。
知名人物与遗产
CIFAR由一系列知名总裁领导,包括弗雷泽·穆斯塔德(1982-1996)、J.斯特凡·杜普雷(1996-2000)、查维瓦·霍谢克(2001-2012)和艾伦·伯恩斯坦(2012-2022)。截至2023年,现任总裁为斯蒂芬·图普。该组织的人工智能项目由杰弗里·辛顿、约书亚·本吉奥和杨·勒昆等关键人物塑造,他们被广泛认为是深度学习的先驱。
CIFAR人工智能研究的遗产体现在其项目开发技术的广泛采用上。诸如批归一化、丢弃法和层归一化等概念现已成为机器学习实践的标准。该组织强调神经科学与计算机科学之间的合作,影响了研究人员处理人工智能问题的方式,从计算机视觉到自然语言处理。
CIFAR继续通过其研究项目和国家战略塑造人工智能格局,支持解决生成式人工智能及其他新兴技术的技术挑战和社会影响的工作。