인공지능법(AI Act)은 유럽연합(EU) 내 인공지능(AI)에 대한 공통 규제 및 법적 체계를 수립하는 EU 규정이다. 이 법은 2024년 8월 1일에 발효되었으며, 조항들은 이후 6개월에서 36개월에 걸쳐 단계적으로 시행된다. 이 법은 광범위한 분야에 걸쳐 대부분의 AI 시스템을 대상으로 하지만, 군사, 국가 안보, 연구 목적으로만 사용되거나 비전문적 용도로 사용되는 AI는 예외로 한다. 제품 규제의 한 형태로서 이 법은 개인 권리를 창설하지 않으며, 대신 AI 제공자와 전문적 맥락에서 AI를 사용하는 조직에 의무를 부과한다.
이 법은 예외 대상이 아닌 AI 애플리케이션을 위해 피해 발생 위험에 따라 허용 불가, 고위험, 제한적, 최소의 네 가지 수준과 범용 AI를 위한 추가 범주로 분류한다. 허용 불가 위험을 지닌 애플리케이션은 금지되며, 고위험 애플리케이션은 보안, 투명성 및 품질 의무를 준수하고 적합성 평가를 거쳐야 한다. 제한적 위험 애플리케이션은 투명성 의무만 있으며, 최소 위험 애플리케이션은 규제되지 않는다. 범용 AI의 경우 투명성 요구 사항이 부과되며, 오픈 소스 모델에 대해서는 요구 사항이 축소되고, 고성능 모델에 대해서는 추가 평가가 요구된다. 이 법은 또한 국가 간 협력을 촉진하고 규정 준수를 보장하기 위해 유럽 인공지능 위원회(European Artificial Intelligence Board)를 설립한다. EU의 일반 데이터 보호 규정(GDPR)과 마찬가지로, 이 법은 EU 내 사용자가 있는 경우 EU 외부 제공자에게도 역외 적용될 수 있다.
입법 연혁
유럽 위원회는 2021년 4월 21일에 AI Act를 제안했다. 초안은 ChatGPT와 같은 생성형 AI 시스템의 인기 상승에 대응하기 위해 수정되었으며, 이러한 시스템의 범용 능력은 주요 체계에 맞지 않았다. 유럽 의회는 2024년 3월 13일에 이 법을 통과시켰고, EU 이사회는 2024년 5월 21일에 만장일치로 승인했다. 최종 텍스트는 EU 공식 저널에 게재되었으며, 규정은 2024년 8월 1일에 발효되었다. 단계적 시행으로 인해 허용 불가 위험 시스템 금지와 같은 일부 조항은 더 일찍 적용되는 반면, 고위험 시스템 의무와 같은 다른 조항은 더 늦게 적용된다.
위험 범주
AI Act는 제품 안전 모델을 따르는 위험 기반 체계를 수립한다. 규제 의무는 AI 시스템의 제공자와 배포자에게 할당되며, 건강, 안전 또는 기본권에 대한 잠재적 영향이 증가함에 따라 이러한 의무는 더 엄격해진다. 이 구조는 감독이 상당한 위험을 초래할 가능성이 있는 시스템에 집중되도록 하면서, 덜 민감한 용도로 간주되는 사용에는 더 가벼운 접근 방식을 허용한다. 일부 법학자들은 실제로 이 법이 '신뢰할 수 있는 AI'를 이러한 안전 및 위험 기준을 준수함을 보여줄 수 있는 시스템으로 규정한다고 주장한다. 유럽 의회 연구 서비스의 초기 평가에 따르면, 위원회의 영향 평가는 위험 기반 체계에 대한 정책 옵션을 비교할 때 이해관계자 협의와 광범위한 기존 연구를 활용했다.
허용 불가 위험
이 범주의 AI 애플리케이션은 특정 예외를 제외하고 금지된다. 예외가 적용되지 않는 경우, 인간 행동을 조작하는 AI 애플리케이션, 공공 장소에서 실시간 원격 생체 인식(예: 얼굴 인식)을 사용하는 애플리케이션, 그리고 사회적 점수 매기기(개인의 개인적 특성, 사회경제적 지위 또는 행동에 따라 개인을 순위화하는 것)에 사용되는 애플리케이션이 포함된다.
고위험
개인의 건강, 안전 또는 기본권에 중대한 위협을 초래할 것으로 예상되는 AI 애플리케이션은 이 범주에 속한다. 특히 건강, 교육, 채용, 핵심 인프라 관리, 법 집행 또는 사법에 사용되는 AI 시스템이 포함된다. 이러한 시스템은 품질, 투명성, 인간 감독 및 안전 의무를 준수해야 하며, 일부 경우 배포 전에 기본권 영향 평가를 요구한다. 기본권 영향 평가(FRIA)는 AI 시스템이 배포되기 전에 기본권에 대한 잠재적 영향을 식별하고 완화하기 위한 사전 검토이다. 알고리즘 영향 평가에 대한 초기 연구는 이러한 도구가 자동화 시스템의 영향을 받는 개인과 커뮤니티를 식별하고, 가능한 피해를 설명하며, 그 사용에 대한 공공 및 제도적 감시의 기반을 제공해야 한다고 제안했다. 고위험 시스템은 시장 출시 전과 수명 주기 전반에 걸쳐 평가되어야 한다. 고위험 애플리케이션 목록은 AI Act 자체를 수정하지 않고도 시간이 지남에 따라 확장될 수 있다. 시민들은 또한 AI 시스템에 대해 불만을 제기하고, 자신의 권리에 영향을 미치는 고위험 AI의 결정에 대한 설명을 받을 권리가 있다.
제한적 위험
이 범주의 AI 시스템은 투명성 의무가 있어 사용자가 AI 시스템과 상호 작용하고 있음을 알리고 정보에 입각한 선택을 할 수 있도록 보장한다. 이 범주에는 예를 들어 이미지, 소리 또는 비디오를 생성하거나 조작할 수 있는 AI 애플리케이션(예: 딥페이크)이 포함된다.
최소 위험
이 범주에는 예를 들어 비디오 게임이나 스팸 필터에 사용되는 AI 시스템이 포함된다. 대부분의 AI 애플리케이션은 이 범주에 속할 것으로 예상된다. 이러한 시스템은 규제되지 않으며, 회원국은 최대 조화 규칙으로 인해 추가 규정을 부과할 수 없다. 이러한 시스템의 설계 또는 사용에 관한 기존 국가 법률은 무효화된다. 그러나 자발적 행동 강령이 제안된다.
범용 AI
2023년에 추가된 범용 AI 범주에는 광범위한 작업을 수행할 수 있는 기반 모델(예: ChatGPT)이 포함된다. 모델의 가중치와 설계가 오픈 소스로 공개된 경우 개발자는 훈련 데이터 요약과 저작권 정책을 게시해야 하며, 폐쇄 소스 모델은 더 광범위한 투명성 요구 사항을 충족해야 한다. 시스템적 위험을 초래하는 고영향 모델(훈련에 10^25회 이상의 부동 소수점 연산 필요)은 추가 평가를 받아야 한다. 2025년 7월 10일에 게시된 범용 AI 행동 강령은 투명성, 저작권, 안전 및 보안에 관한 세 가지 주요 장을 개요로 제시하여 제공자가 AI Act 준수를 입증하도록 돕는다. 강령 참여는 자발적이다.
이러한 기본 투명성 의무 외에도, 이 법은 범용 AI 모델 제공자를 위한 공통 의무 목록을 설정한다. 제공자는 훈련 데이터 요약을 게시하고, 저작권법을 준수하는 정책을 채택하며, 하류 제공자와 감독 당국에 기술 문서를 제공해야 한다. 시스템적 위험을 초래하는 것으로 지정된 모델은 또한 모델 평가 및 적대적 테스트를 수행하고, 편향 및 보안 실패와 같은 위험을 평가하고 완화하며, 심각한 사고를 보고하고, 적절한 수준의 사이버 보안을 보장해야 한다.
예외
제2.3조 및 제2.6조는 군사 또는 국가 안보 목적으로 사용되거나 순수 과학 연구 개발에 사용되는 AI 시스템을 AI Act에서 예외로 한다. 특히, 이 규정은 AI 시스템이 군사, 국방 또는 국가 안보 목적으로만 사용되거나 과학 연구를 위해서만 개발되고 서비스에 투입된 시스템에는 적용되지 않는다. 또한 비전문적 개인 활동에 사용되는 AI는 적용 대상이 아니다.
집행 및 거버넌스
이 법은 국가 간 협력을 촉진하고 규정 준수를 보장하기 위해 유럽 인공지능 위원회를 설립한다. 각 회원국은 시장 감시 및 집행을 위한 권한 있는 당국을 지정할 것으로 예상된다. 이 법은 GDPR과 유사하게 EU 내 사용자가 있는 경우 EU 외부 제공자에게도 역외 적용될 수 있다. 불이행에 대한 벌칙은 상당할 수 있지만, 구체적인 금액은 출처 사실에 자세히 명시되지 않았다.
영향 및 수용
AI Act는 세계 최초의 포괄적인 AI 법률로서 획기적인 법안으로 간주된다. EU 외부 기업이 EU 시장에 접근하기 위해 이 법의 기준을 준수할 수 있으므로 잠재적 글로벌 영향력 면에서 GDPR과 비교되어 왔다. 위험 기반 접근 방식은 실제 피해에 초점을 맞춘 점에서 칭찬을 받았지만, 일부 비평가들은 고위험 정의가 너무 광범위하거나 군사 및 보안 용도에 대한 예외가 너무 넓다고 주장한다. 이 법은 또한 AI 개발자와 사용자에게 법적 확실성을 제공함으로써 혁신을 촉진하는 것을 목표로 한다.
다른 AI 개발과의 관계
AI Act의 범용 AI 조항은 OpenAI, Anthropic, Google DeepMind와 같은 기관에서 개발한 생성형 AI 모델의 급속한 발전에 대응하여 도입되었다. Transformer (architecture) 아키텍처를 기반으로 구축되고 Machine learning 기술을 사용하여 훈련된 이러한 모델은 여러 영역에 걸친 능력을 갖추고 있어 전통적인 제품 범주에 맞추기 어렵다. 이 법의 투명성 및 위험 평가 요구 사항은 Model Pruning 및 Data Augmentation과 같은 기술적 안전 조치를 보완하기 위한 것이지만, 이 법 자체는 특정 기술적 방법을 규정하지 않는다.
향후 전망
2025년 현재 AI Act는 초기 시행 단계에 있다. 유럽 위원회는 특정 조항을 명확히 하기 위해 추가 지침과 위임 법안을 발행할 것으로 예상된다. 2025년 7월 10일에 게시된 범용 AI 행동 강령은 제공자의 준수를 돕는 핵심 단계이다. 이 법이 EU 및 그 외 지역의 AI 혁신과 배포에 미치는 장기적 영향은 아직 지켜봐야 하지만, 앞으로 수년간 AI 거버넌스에 대한 글로벌 논의를 형성할 가능성이 높다.