인공지능법(AI Act)은 유럽연합의 규정으로, EU 내 인공지능에 대한 공통 규제 및 법적 체계를 수립한다. 이 법은 2024년 8월 1일에 발효되었으며, 조항들은 이후 6개월에서 36개월에 걸쳐 단계적으로 시행된다. 이 법은 광범위한 분야에 걸쳐 대부분의 AI 시스템을 대상으로 하지만, 군사, 국가 안보, 연구 목적 또는 비전문적 사용에만 사용되는 AI는 면제된다. 제품 규제의 한 형태로서 개인 권리를 창설하지 않으며, 대신 AI 제공자와 전문적 맥락에서 AI를 사용하는 조직에 의무를 부과한다.
이 법은 면제되지 않은 AI 애플리케이션을 피해 발생 위험에 따라 허용 불가, 고위험, 제한적, 최소의 네 가지 수준으로 분류하며, 범용 AI에 대한 추가 범주를 포함한다. 허용 불가 수준의 위험을 지닌 애플리케이션은 금지된다. 고위험 애플리케이션은 보안, 투명성 및 품질 의무를 준수하고 적합성 평가를 받아야 한다. 제한적 위험 애플리케이션은 투명성 의무만 있다. 최소 위험 애플리케이션은 규제되지 않는다. 범용 AI의 경우 투명성 요구 사항이 부과되며, 오픈 소스 모델에는 요구 사항이 축소되고, 고성능 모델에는 추가 평가가 적용된다. 이 법은 또한 국가 간 협력을 촉진하고 규정 준수를 보장하기 위해 유럽 인공지능 위원회를 설립한다. EU의 일반 데이터 보호 규정과 마찬가지로, 이 법은 EU 내 사용자가 있는 경우 EU 외부 제공자에게도 역외 적용될 수 있다.
입법 연혁
유럽 위원회는 2021년 4월 21일에 AI Act를 제안했다. 초안은 ChatGPT와 같은 생성형 AI 시스템의 인기 상승에 대응하기 위해 수정되었으며, 이러한 시스템의 범용 능력은 주요 체계에 맞지 않았다. 유럽 의회는 2024년 3월 13일에 이 법을 통과시켰고, EU 이사회는 2024년 5월 21일에 만장일치로 승인했다. 이 규정은 2024년 8월 1일에 발효되었으며, 조항은 이후 6개월에서 36개월에 걸쳐 단계적으로 시행된다.
위험 범주
AI Act는 위험 기반 접근 방식을 채택하여 AI 시스템의 제공자와 배포자에게 규제 의무를 부여한다. 이러한 의무는 건강, 안전 또는 기본권에 대한 잠재적 영향이 커질수록 더 엄격해진다. 이 구조는 감독이 중대한 위험을 초래할 가능성이 있는 시스템에 집중되도록 하면서, 덜 민감한 용도로 간주되는 사용에는 더 가벼운 접근 방식을 허용한다.
허용 불가 위험
이 범주의 AI 애플리케이션은 특정 면제를 제외하고 금지된다. 면제가 적용되지 않는 경우, 인간 행동을 조작하는 AI 애플리케이션, 공공 장소에서 실시간 원격 생체 인식(예: 얼굴 인식)을 사용하는 애플리케이션, 그리고 사회적 점수 매기기(개인의 개인적 특성, 사회경제적 지위 또는 행동에 따라 개인을 순위화하는 것)에 사용되는 애플리케이션이 포함된다.
고위험
건강, 안전 또는 개인의 기본권에 중대한 위협을 초래할 것으로 예상되는 AI 애플리케이션은 이 범주에 속한다. 특히 건강, 교육, 채용, 핵심 인프라 관리, 법 집행 또는 사법에 사용되는 AI 시스템이 포함된다. 이러한 시스템은 품질, 투명성, 인간 감독 및 안전 의무를 받으며, 일부 경우 배포 전에 기본권 영향 평가(FRIA)가 필요하다. FRIA는 AI 시스템이 배포되기 전에 기본권에 대한 잠재적 영향을 식별하고 완화하기 위한 사전 검토이다. 알고리즘 영향 평가에 대한 초기 연구는 이러한 도구가 자동화 시스템의 영향을 받는 개인과 커뮤니티를 식별하고, 가능한 피해를 설명하며, 그 사용에 대한 공공 및 제도적 조사의 기초를 제공해야 한다고 제안했다. 고위험 시스템은 시장 출시 전과 수명 주기 전반에 걸쳐 평가되어야 한다. 고위험 애플리케이션 목록은 AI Act 자체를 수정하지 않고도 시간이 지남에 따라 확장될 수 있다. 시민은 AI 시스템에 대해 불만을 제기하고 권리에 영향을 미치는 고위험 AI의 결정에 대한 설명을 받을 권리가 있다.
제한적 위험
이 범주의 AI 시스템은 투명성 의무를 가지며, 사용자가 AI 시스템과 상호 작용하고 있음을 알리고 정보에 입각한 선택을 할 수 있도록 보장한다. 이 범주에는 딥페이크와 같은 이미지, 소리 또는 비디오를 생성하거나 조작하는 AI 애플리케이션이 포함된다.
최소 위험
이 범주에는 비디오 게임 또는 스팸 필터에 사용되는 AI 시스템이 포함된다. 대부분의 AI 애플리케이션은 이 범주에 속할 것으로 예상된다. 이러한 시스템은 규제되지 않으며, 최대 조화 규칙으로 인해 회원국은 추가 규정을 부과할 수 없다. 이러한 시스템의 설계 또는 사용에 관한 기존 국가 법률은 무효화된다. 그러나 자발적 행동 강령이 제안된다.
범용 AI 의무
2023년에 추가된 범용 AI 범주에는 광범위한 작업을 수행할 수 있는 기반 모델(예: ChatGPT)이 포함된다. 모델의 가중치와 설계가 오픈 소스로 공개된 경우 개발자는 훈련 데이터 요약과 저작권 정책을 게시해야 하며, 폐쇄형 소스 모델은 더 광범위한 투명성 요구 사항을 충족해야 한다. 체계적 위험을 초래하는 고영향 모델(훈련에 10의 25제곱 부동 소수점 연산 이상이 필요한 모델)은 추가 평가를 받아야 한다.
이러한 기본 투명성 의무 외에도, 이 법은 범용 AI 모델 제공자를 위한 공통 의무 목록을 설정한다. 제공자는 훈련 데이터 요약을 게시하고, 저작권법을 준수하는 정책을 채택하며, 하류 제공자와 감독 기관에 기술 문서를 제공해야 한다. 체계적 위험을 초래하는 것으로 지정된 모델은 모델 평가와 적대적 테스트를 수행하고, 편향 및 보안 실패와 같은 위험을 평가하고 완화하며, 중대한 사고를 보고하고, 적절한 수준의 사이버 보안을 보장해야 한다.
2025년 7월 10일에 게시된 범용 AI 행동 강령은 투명성, 저작권, 안전 및 보안에 관한 세 가지 주요 장을 개괄하여 제공자가 AI Act 준수를 입증하는 데 도움을 준다. 강령 참여는 자발적이다.
면제
제2.3조와 제2.6조는 군사 또는 국가 안보 목적 또는 순수 과학 연구 개발에 사용되는 AI 시스템을 AI Act에서 면제한다. 이 규정은 AI 시스템이 군사, 국방 또는 국가 안보 목적으로만 사용되거나 순수 과학 연구를 위해 개발되고 서비스에 투입된 시스템에는 적용되지 않는다.
시행 및 집행
이 법은 국가 간 협력을 촉진하고 규정 준수를 보장하기 위해 유럽 인공지능 위원회를 설립한다. 단계적 시행은 발효 후 6개월에서 36개월에 걸쳐 서로 다른 시점에 서로 다른 의무가 적용됨을 의미한다. 역외 적용 범위는 GDPR을 반영하여 EU 내 사용자가 있는 경우 EU 외부 제공자에게도 적용된다.
평가 및 분석
위험 기반 체계는 제품 안전 모델을 따르며, "신뢰할 수 있는 AI"를 안전 및 위험 기준 준수를 입증할 수 있는 시스템으로 정의한다. 유럽 의회 연구 서비스의 초기 평가에 따르면, 위원회의 영향 평가는 위험 기반 체계에 대한 정책 옵션을 비교할 때 이해관계자 협의와 광범위한 기존 연구를 활용했다.