Artificial Analysis · X

결정 모델은 언어 모델에 비해 상당한 속도 및 비용상의 이점을 제공하지만, 지식과 추론에서는 뒤처집니다. 분류 작업에서는…

이미지 출처 · Artificial Analysis · X

결정 모델은 언어 모델에 비해 상당한 속도 및 비용상의 이점을 제공하지만, 지식과 추론에서는 뒤처집니다. 분류 및 도구 호출 작업에서는 선도적인 결정 모델들이 언어 모델과 비슷한 성능을 보이면서도 훨씬 빠르고 저렴합니다. 그러나 지식과 추론 분야에서는 언어 모델이 더 뛰어납니다. Claude Haiku 5.5 (Low)는 Decision Index에서 61점을 기록해 Jev 1.13보다 3점 앞서지만, 작업당 1.4초가 걸리는 반면 0.13초(11배 느림) 소요되며, 1M Tasks당 비용은 $184로 Jev 1.13의 $42보다 4.4배 비쌉니다.

원문 출처

Artificial Analysis · X

내용 안내

원문 발행 및 권리는 출처에 있습니다.

기계 번역 · 원문을 참고하세요