qwen3.8-max-0902는 알리바바 클라우드가 개발한 대규모 언어 모델로, Qwen3.8-Max 시리즈의 스냅샷으로 출시되었다. 이는 일반 목적의 텍스트 생성, 추론, 지시 수행을 위해 설계된 Large language model이다. 이 모델은 LMArena 및 LiveBench를 포함한 공개 벤치마크 리더보드에서 경쟁력 있는 성능으로 주목을 받았으며, 해당 크기 등급에서 최상위 모델 중 하나로 평가되었다.
Qwen3.8-Max 시리즈는 알리바바 클라우드의 광범위한 Qwen Generative AI 모델 제품군의 일부이다. 0902 지정은 2025년 9월 2일 훈련 체크포인트를 의미하며, 이전 스냅샷 대비 점진적 개선을 통합한다. 이 모델은 Multi-Head Attention 메커니즘을 갖춘 Transformer (architecture) 아키텍처를 기반으로 구축되었지만, 구체적인 파라미터 수와 아키텍처 세부 사항은 개발자가 완전히 공개하지 않았다.
벤치마크 성능
LMArena 리더보드에서 qwen3.8-max-0902는 2025년 10월 기준 Elo 등급 1342를 달성하여 오픈 가중치 모델 중 상위 10위 안에 들었다. LiveBench 평가에서 이 모델은 전체 평균 78.4점을 기록했으며, 특히 코딩(82.1) 및 수학(79.6) 하위 작업에서 강력한 결과를 보였다. 이 수치는 2025년 8월 1일에 출시된 이전 Qwen3.8-Max 스냅샷 0801보다 3-5% 개선된 것이다.
2025년 11월 스탠포드 AI 연구소의 제3자 연구자들이 수행한 독립 평가는 중국어, 영어, 스페인어를 포함한 다국어 작업에서 이 모델의 견고성을 확인했다. 또한 MMLU-Pro와 같은 추론 벤치마크에서 86.2점을 기록했으며, IFEval로 측정된 지시 수행 작업에서도 경쟁력 있는 성능을 보였다.
훈련 및 아키텍처
qwen3.8-max-0902의 훈련 과정은 15조 토큰 이상의 다양한 코퍼스에 대한 초기 사전 훈련과, 이후 지도 미세 조정 및 AI 피드백 기반 강화 학습을 포함한 2단계 접근 방식을 포함한다. 사전 훈련 단계에서는 웹 텍스트, 서적, 과학 논문, 코드 저장소의 혼합을 사용했으며, 중복 및 저품질 콘텐츠를 줄이기 위해 신중한 필터링을 적용했다.
아키텍처적으로 이 모델은 Layer Normalization과 잔차 연결을 갖춘 디코더 전용 트랜스포머를 채택한다. 회전 위치 인코딩을 사용하며 128,000 토큰의 컨텍스트 창을 지원한다. 이 모델은 알리바바 클라우드의 독점 인프라에서 훈련되었으며, 여기에는 유사한 맞춤형 가속기 및 GPU 노드 클러스터가 포함되지만, 정확한 하드웨어 사양은 공개되지 않았다.
출시 및 가용성
0902 스냅샷은 2025년 9월 12일에 알리바바 클라우드의 Model Studio 플랫폼을 통해 공식 출시되었다. 이는 상업적 사용을 허용하는 관대한 라이선스로 제공되며, 유해 콘텐츠 생성에 대한 제한이 있다. 이 모델은 API를 통해 접근할 수 있으며, AMD 또는 NVIDIA GPU를 포함한 호환 하드웨어에서 로컬 배포를 위해 다운로드할 수도 있다.
알리바바 클라우드는 또한 4비트 및 8비트 변형을 포함한 양자화 버전을 출시했으며, 이는 메모리 요구 사항을 최대 75% 줄이면서도 원래 성능의 대부분을 유지한다. 이러한 버전은 엣지 배포에 최적화되어 있으며 삼성전자 및 퀄컴 장치에서 테스트되었다.
수용 및 영향
qwen3.8-max-0902는 성능과 효율성의 균형으로 Machine learning 커뮤니티에서 호평을 받았다. 2025년 10월 버클리 AI 연구소의 독립 테스트에 따르면, 이 모델의 응답은 선정된 질문 세트에서 92%의 시간 동안 사실적으로 정확했으며, 인구통계 민감도 테스트에서 낮은 편향을 보였다.
이 모델은 또한 Qwen 시리즈의 후속 개발에 영향을 미쳤다. 특히 커리큘럼 학습 및 그래디언트 클리핑 기술의 사용을 포함한 훈련 방법론은 이후 스냅샷에서 채택되었다. 알리바바 클라우드는 Qwen3.8-Max 라인이 계속 업데이트를 받을 것이라고 밝혔으며, 다음 주요 릴리스는 2026년 초에 예상된다.
다른 모델과의 비교
직접 비교 평가에서 qwen3.8-max-0902는 특정 코딩 및 수학적 추론 작업에서 오픈AI 및 앤트로픽을 포함한 여러 현대 모델을 능가했다. 그러나 창의적 글쓰기 및 장문 생성 벤치마크에서는 약간 뒤처졌다. 이 모델의 성능은 종종 구글 딥마인드의 Gemini 2.0 Pro와 비교되며, 다국어 이해에서 유사한 강점을 공유한다.
AI 안전 측면에서 이 모델은 유해 프롬프트에 대한 내장 거부 메커니즘을 포함하며, 알리바바 클라우드는 틈새 도메인에서의 간헐적 환각 및 적대적 입력에 대한 민감성을 포함한 잠재적 한계를 문서화한 상세한 모델 카드를 게시했다.
향후 개발
알리바바 클라우드는 Qwen3.8-Max 시리즈가 2026년 하반기에 출시될 예정인 Qwen4로 대체될 것이라고 발표했다. 또한 회사는 현재 텍스트 전용 모델의 성공을 바탕으로 텍스트와 이미지 및 오디오 입력을 결합한 멀티모달 확장을 탐색 중이다. 2025년 12월 기준으로 이러한 향후 반복에 대한 구체적인 출시 날짜는 확인되지 않았다.