Aleph Alpha, 유럽 AI 주권을 뒷받침하는 오픈 웨이트 모델 Kolibri 공개
Matthias Bastian
Matthias Bastian의 LinkedIn 프로필 보기
2026년 10월 5일
Aleph Alpha가 mixture-of-experts 아키텍처를 통해 토큰당 약 three billion의 파라미터만 활성화되는, 78 billion 파라미터를 가진 독일어-영어 언어 모델 Kolibri를 출시했습니다. Aleph Alpha는 Kolibri가 두 언어 모두에서 품질과 운영 비용의 파레토 경계(Pareto front)에 위치하며, 유사한 아키텍처를 가진 비교 모델들, 그중 일부는 상당히 오래된(2026년 3월, 4월) 모델들보다 어느 한 지표에서라도 더 우수한 성능을 보인다고 주장합니다. 훈련 데이터에서 독일어가 차지하는 비율은 21.3%이며, 이를 뒷받침하는 것은 회사가 이 프로젝트를 위해 구축한 전용 독일어 데이터 파이프라인입니다. 합성 훈련 데이터를 생성하기 위해 중국 모델도 사용되었습니다.
Aleph Alpha에 따르면 Kolibri는 공공 행정, 항공, 산업 분야를 목표로 합니다. 이 모델은 EU AI Act를 염두에 두고 유럽 법률 하에서 개발되었으며, 최대 one million 토큰의 컨텍스트 윈도우를 지원하고, 독일과 핀란드의 768개 B200 GPU에서 훈련되었습니다. 이는 기술 보고서에 따른 것입니다. 가중치는 Apache 2.0 라이선스로 Hugging Face.
Ad과장 없는 AI 뉴스 – 사람이 직접 큐레이션합니다
광고 없는 읽기, 주간 AI 뉴스레터, 연 6회 독점 "AI Radar" 프론티어 보고서, 전체 아카이브 접근, 댓글 섹션 이용을 위해 THE DECODER를 구독하세요.
출처: 모델 카드 | 블로그