Ali Ghodsi(1978년 출생)은 분산 시스템, 빅데이터, 데이터 관리 분야를 전문으로 하는 이란계 스웨덴계 미국인 컴퓨터 과학자이자 기업가이다. 그는 Apache Spark 분석 엔진을 상용화하는 회사인 Databricks의 공동 창립자이자 최고경영자(CEO)이며, 캘리포니아 대학교 버클리 캠퍼스의 겸임 교수이기도 하다. 그의 연구는 대규모 컴퓨팅 프레임워크의 자원 관리, 특히 지배적 자원 공정성(dominant resource fairness) 개념에 영향을 미쳤다.
Ghodsi는 2006년 스웨덴 왕립공과대학(KTH)에서 Seif Haridi의 지도 아래 박사 학위를 받았다. 그는 스톡홀름에 본사를 둔 P2P 데이터 전송 시스템 개발 회사인 Peerialism AB를 공동 창립했으며, 2008년부터 2009년까지 KTH에서 조교수로 재직했다. 2009년에는 UC 버클리로 방문 학자로 합류하여 Scott Shenker, Ion Stoica, Michael Franklin, Matei Zaharia 등 연구자들과 분산 시스템, 데이터베이스 시스템, 네트워킹 분야 프로젝트를 공동으로 수행했다. 이 기간 동안 그는 Apache Mesos와 Apache Spark 프로젝트를 시작하는 데 기여했다. 2013년에는 Databricks를 공동 창립했고, 2016년에 CEO가 되었다.
초기 경력 및 교육
Ghodsi의 학문적 여정은 미드스웨덴 대학교(Mid-Sweden University)에서 시작되어 1997년 전기 및 컴퓨터 공학 학사 학위를, 2002년 컴퓨터 공학 석사 학위를, 2003년 물류 및 마케팅 분야 MBA를 취득했다. 이후 스웨덴 왕립공과대학(KTH)으로 옮겨 2006년 컴퓨터 과학 박사 학위를 마쳤다. 그의 박사 연구는 분산 컴퓨팅에 초점을 맞추었으며, 이후 스케줄링 및 자원 할당 분야 연구의 기초가 되었다.
박사 학위 취득 후 Ghodsi는 P2P 데이터 전송 시스템을 개발하는 회사인 Peerialism AB를 공동 창립했다. 또한 2008년부터 2009년까지 KTH에서 조교수로 재직하며 분산 시스템 연구를 계속했고, 이후 UC 버클리에서 방문 학자로 활동했다.
분산 시스템에 대한 기여
UC 버클리에서 Ghodsi는 여러 머신의 자원을 추상화하는 클러스터 관리자인 Apache Mesos 프로젝트에 참여했다. 그의 주요 이론적 기여는 여러 자원 유형에 대한 max-min 공정성을 일반화한 지배적 자원 공정성(dominant resource fairness) 개념이다. 이 원리는 널리 인용된 논문을 통해 발표되었으며, Hadoop과 같은 분산 시스템의 스케줄링 설계에 영향을 주어 CPU, 메모리 및 기타 자원의 보다 공정한 할당을 가능하게 했다.
Ghodsi는 대규모 데이터 처리를 위한 통합 분석 엔진인 Apache Spark에도 기여했다. 구조화된 데이터 처리를 위한 모듈인 Spark SQL에 대한 그의 작업은 분산 컴퓨팅 프레임워크 위에 관계형 인터페이스를 제공함으로써 더 넓은 범위의 사용자가 시스템을 사용할 수 있게 하는 데 도움을 주었다. 이러한 프로젝트들은 현대 빅데이터 인프라의 기초가 되었다.
Databricks와 리더십
2013년 Ghodsi는 Ion Stoica, Matei Zaharia 등 UC 버클리 동료들과 함께 Databricks를 공동 창립했다. 회사는 처음에 Apache Spark를 상용화하여 데이터 엔지니어링과 머신 러닝을 위한 관리형 클라우드 플랫폼을 제공하는 데 주력했다. Ghodsi는 2016년 CEO가 되어 빠른 성장을 이끌었다.
그의 리더십 아래 Databricks는 AI 데이터 플랫폼으로 확장하여 Machine learning 워크플로우를 통합하고 Large language model 개발을 지원하게 되었다. 현재 이 플랫폼은 다양한 산업 분야의 기업들이 Amazon Web Services, Microsoft Azure, Google Cloud와 같은 클라우드 환경에서 데이터 저장, 처리, 분석을 수행할 수 있도록 지원한다. Ghodsi는 Databricks를 Generative AI 분야의 경쟁자로 자리매김하며 데이터 거버넌스와 개방형 표준의 중요성을 강조해 왔다.
연구 관심사와 영향
Ghodsi의 연구 관심사는 분산 시스템, 클라우드 컴퓨팅, 빅데이터 컴퓨팅, 네트워킹을 포함한다. 그의 학술 연구는 최고 수준의 학회와 저널에 게재되었으며, 클러스터 스케줄링 및 쿼리 최적화에 관한 영향력 있는 논문을 공동 저술했다. UC 버클리 겸임 교수로서 그는 학계와의 유대를 유지하며 학생들을 지도하고 Artificial intelligence 인프라 관련 프로젝트에 협력하고 있다.
그의 기여는 데이터 시스템 설계에 지속적인 영향을 미쳤다. 지배적 자원 공정성 개념은 이제 자원 관리 문헌에서 표준이 되었으며, Apache Spark는 대규모 데이터 처리를 위한 가장 널리 사용되는 프레임워크 중 하나가 되었다. Ghodsi의 경력은 컴퓨터 과학 분야에서 학술 연구와 상업적 혁신을 연결하는 가교 역할을 보여준다.
수상 및 인정
Ghodsi는 기술적 기여와 기업가적 리더십에 대해 여러 차례 인정을 받았다. 그는 영향력 있는 기술 경영자 목록에 여러 차례 이름을 올렸으며 주요 산업 컨퍼런스에서 연설했다. Apache Spark와 Databricks에 대한 그의 업적은 업계 상을 통해 인정받았지만, 구체적인 수상 내역은 공개 자료에 자세히 나와 있지 않다. 2025년 현재 그는 Databricks의 CEO로 계속 재직 중이며, 그가 구축하는 데 기여한 AI 데이터 플랫폼은 400억 달러 이상의 기업 가치를 인정받아 상업적 성공을 반영하고 있다.