INRIA Saclay는 프랑스 디지털 과학 연구소(INRIA)의 연구 센터로, 2011년 파리-사클레 클러스터로의 연구소 확장의 일환으로 설립되었다. 이 센터는 파리 남부의 사클레 고원에 위치하며, 디지털 과학, 특히 인공지능, 머신러닝 및 그 응용 분야에 중점을 두고 있다. 또한 École Polytechnique 및 Université Paris-Saclay를 포함한 지역 대학 및 공과대학들과 협력하여 수많은 연구 팀과 프로젝트를 운영하고 있다.
이 센터는 2011년 공식적으로 개관했으며, 2012년에 첫 연구 팀이 새 건물로 입주했다. 이는 Île-de-France 지역에서 INRIA의 입지를 강화하고 데이터 과학, 최적화, 인간 중심 AI와 같은 분야의 학제 간 연구를 촉진하기 위해 설계되었다. 2024년 기준으로 INRIA Saclay는 30개 이상의 연구 팀을 운영하며, 500명 이상의 연구원, 엔지니어, 박사 과정 학생들이 참여하고 있다.
연구 초점 및 AI 기여
INRIA Saclay의 연구 의제는 컴퓨터 과학의 광범위한 영역을涵盖하지만, 특히 AI 관련 작업이 두드러진다. 이 센터는 머신러닝, 딥러닝, 신경망 아키텍처의 발전에 기여했으며, 종종 산업 파트너와 협력한다. 예를 들어, 센터의 연구원들은 잔차 네트워크 변형, 배치 정규화 기법, 그리고 강건한 학습을 위한 손실 함수에 대해 연구했다. 이러한 기여는 NeurIPS, ICML, ICLR과 같은 최고 학회에 발표되었다.
센터의 대표적인 프로젝트 중 하나는 "MIND"(Models of Intelligence and Neural Data) 팀으로, AI와 신경과학의 교차점을 탐구한다. 또 다른 프로젝트인 "TAU"(TAckling the Underspecified)는 머신러닝 모델을 더욱 강건하고 신뢰할 수 있게 만드는 데 중점을 둔다. 이 팀들은 커리큘럼 학습 및 데이터 증강과 같은 주제에 대해 영향력 있는 논문을 발표했으며, 이는 AI 커뮤니티에서 널리 인용되고 있다.
주요 연구자 및 협력
INRIA Saclay는 프랑수아 플뢰레를 포함한 저명한 연구자들을 보유하고 있으며, 그는 효율적인 딥러닝 알고리즘 개발에 기여한 머신러닝 교수이다. 또 다른 핵심 인물로는 대규모 AI 시스템을 위한 최적화 방법을 연구하는 아니 바타차리야가 있다. 이 센터는 또한 MIT CSAIL 및 버클리 AI 연구소와 같은 국제 기관 및 Google DeepMind와 OpenAI 같은 산업 선도 기업과 공동 연구 프로젝트를 수행한다.
2019년, INRIA Saclay는 Amazon Web Services와 파트너십을 체결하여 클라우드 기반 머신러닝 솔루션을 탐구했다. 이 협력은 분산 학습 및 모델 배포를 위한 도구 개발로 이어졌으며, 현재 유럽 전역의 연구원들이 사용하고 있다. 또한, 이 센터는 Nokia Bell Labs와 장기적인 관계를 유지하며 통신 및 네트워크 최적화를 위한 AI에 중점을 두고 있다.
교육 및 훈련
INRIA Saclay는 Université Paris-Saclay와의 연계를 통해 박사 프로그램 및 박사후 연구원 직위를 제공하며 교육에 깊이 관여하고 있다. 이 센터는 매년 딥러닝 여름 학교를 개최하며, 전 세계에서 참가자들이 모인다. 2023년 여름 학교에서는 학계와 산업계 전문가들이 트랜스포머 아키텍처 및 대규모 언어 모델 훈련에 대한 강의를 진행했다.
이 센터는 또한 École Polytechnique와 협력하여 AI에 관한 석사 수준 과정을 운영하며, 멀티헤드 어텐션 및 시퀀스-투-시퀀스 모델과 같은 주제를 다룬다. 이 프로그램의 많은 졸업생들은 Anthropic 및 Google DeepMind를 포함한 주요 AI 기업에서 일하고 있다.
산업 파트너십 및 기술 이전
INRIA Saclay는 기술 이전을 강조하며, 연구에서 여러 스핀오프 기업이 탄생했다. 예를 들어, 2013년에 설립된 스타트업 "Heuritech"은 패션 트렌드 분석에 딥러닝을 활용하며, 2021년 LVMH에 인수되었다. 또 다른 예로 "Shift Technology"는 보험 사기 탐지에 AI를 적용하며, 1억 달러 이상의 자금을 조달했다.
이 센터는 또한 대기업과 응용 연구 프로젝트를 수행한다. 2020년, INRIA Saclay는 삼성전자와 온디바이스 AI 및 모델 압축에 관한 프레임워크 계약을 체결했다. 이 파트너십은 효율적인 신경망 추론에 관한 여러 특허와 논문으로 이어졌다.
향후 전망
INRIA Saclay는 생성형 AI 및 인공지능 안전성 분야의 연구를 확장할 계획이다. 이 센터는 2018년에 15억 유로의 예산으로 시작된 프랑스 국가 AI 전략의 일부이다. 이 이니셔티브의 일환으로 INRIA Saclay는 대규모 언어 모델의 효율성과 제어 가능성을 개선하기 위해 모델 가지치기 및 top-k 샘플링과 같은 새로운 방법을 개발하고 있다.
2024년, 이 센터는 물리학, 생물학, 기후 모델링의 문제에 머신러닝을 적용할 "AI for Science"라는 새로운 연구 프로그램을 발표했다. 이 프로그램은 최적화 및 신경망 설계 분야의 기존 전문성을 활용하여 향후 몇 년 안에 중요한 성과를 낼 것으로 기대된다.
전반적으로 INRIA Saclay는 유럽 AI 환경에서 핵심적인 역할을 담당하며, 기초 연구와 실용적 응용을 연결하고 있다. 머신러닝과 딥러닝에 대한 기여는 지속적인 영향을 미치고 있으며, 협력적인 문화는 혁신을 계속해서 주도하고 있다.