Kimi K3.1 Pro가 Artificial Analysis Intelligence Index에서 55점으로 4위로 출시되며 에이전트 성능에서 큰 향상을 보였습니다. 가중치가 공개되면 최고의 오픈 웨이트 모델이 될 것입니다.
@Kimi_Moonshot의 새로운 추론 모델은 Kimi K3(max, 44)보다 11점 높은 점수를 기록했습니다. Intelligence Index에서 이 모델은 Claude Opus 5.5(max with fallback, 58), Claude Sonnet 5.5(max with fallback, 56), Muse Wonder Full(max, 56)에 이어 4위입니다.
K3.1 Pro의 가중치가 공개되면 최고 점수의 오픈 웨이트 모델이 되며, Intelligence Index에서 선도적인 오픈 웨이트 모델과 독점 모델 간 격차는 12점에서 3점으로 좁혀집니다.
주요 결과:
➤ 에이전트 성능의 큰 향상: Kimi K3.1 Pro는 GDPval-AA에서 1,846 Elo로 3위를 기록했으며, Kimi K3 대비 312 Elo 상승했고 Claude Opus 5.5(1,866 Elo)와 Muse Wonder Full(1,857 Elo)에 이어 3위입니다. Kimi K3.1 Pro는 또한 Terminal-Bench 4.0에서 어떤 모델보다도 높은 점수를 달성했습니다. K3.1 Pro는 67%를 기록했으며, Kimi K3의 13%에서 크게 상승했고 Claude Sonnet 5.5(64%)를 앞섭니다. 에이전트 SaaS 워크플로를 테스트하는 AutomationBench-AA는 58%에서 73%로 상승했습니다.
➤ 다른 평가에서의 향상은 더 완만합니다: Humanity's Last Exam은 47%에서 52%로, CritPt는 23%에서 25%로, SciCode는 59%에서 61%로 상승했습니다. AA-Omniscience Index는 20에서 30으로 상승했으며, 환각률은 53%에서 44%로 낮아지고 정확도는 48%에서 51%로 상승했습니다.
➤ 태스크당 비용은 태스크당 $1.98로 Kimi K3와 거의 동일: K3.1 Pro는 Intelligence Index 태스크당 55K 출력 토큰을 사용하며, 이는 Kimi K3의 48K보다 14% 많지만, 자사 토큰 가격은 33% 낮습니다.
추가 모델 세부 정보:
➤ 컨텍스트 윈도우: 1M 토큰.
➤ 크기: 총 2.8T, 활성 파라미터 104B
➤ 입력 모달리티: 텍스트 및 이미지
➤ 가중치 및 라이선스: 가중치는 현재 미공개, Moonshot은 출시 직후 가중치를 공개할 예정으로 보입니다
➤ 가격: 1M 입력/출력/캐시 히트 토큰당 $2/$10/$0.20로 세 요금 모두 Kimi K3보다 33% 낮습니다.
@Kimi_Moonshot 팀의 출시를 축하합니다!