MarkTechPost

Z.ai GLM-Legal supera a Claude Fable 5 y Kimi K3 en Harvey LAB

GLM-Legal de Z.ai es un modelo de IA legal construido sobre GLM-5.3-Flash. Obtiene un 19.2% de aprobación total en el Legal Agent Benchmark de Harvey, casi 3 veces su base, a $0.15 por prueba. El acceso es por solicitud.…

Z.ai acaba de lanzar GLM-Legal. GLM-Legal es un modelo de IA legal de Z.ai, construido sobre GLM-5.3-Flash y entrenado para trabajo legal agéntico. Se enfoca en revisión de contratos, análisis de evidencia e investigación de cumplimiento. El resultado clave es una tasa de aprobación total del 19.2% en el Legal Agent Benchmark (LAB) de Harvey. Eso es casi 3 veces el 6.7% de su modelo base. Para los desarrolladores, el inconveniente es el acceso: la API es solo por solicitud por ahora.

TL;DR

  • Tamaño: Construido sobre GLM-5.3-Flash, un MoE de 320B totales y 18B activos con un contexto de 1M de tokens y 128K de salida máxima. Z.ai no indica un recuento de parámetros separado para GLM-Legal.
  • Se ejecuta en: Únicamente la API alojada de Z.ai, por solicitud. Sin pesos públicos. El modelo base se autoaloja en servidores multi-GPU mediante vLLM o SGLang, con pesos FP8.
  • Rendimiento: Top-10 en Harvey LAB a una fracción del costo de frontera. A 2.3 puntos del líder de LegalBench.
  • Lo mejor: Tasa de aprobación de tareas del 19.17% en Harvey LAB, #7 de 79 en Vals AI, a $0.15 por prueba.
  • Lo peor: 41.83% en el Legal Research Bench de Vals AI, por debajo de su propio modelo base (45.19%).
  • Conclusión:
    • Lo mejor: puntuaciones de agente legal de clase frontera a aproximadamente 1/128 del costo de Claude Fable 5.
    • Lo peor: beta con acceso restringido, sin precio, sin pesos y ejecuciones lentas (1h12m por tarea).

¿Qué es GLM-Legal?

GLM-Legal es una versión especializada en dominio de GLM-5.3-Flash para despachos de abogados, asesores jurídicos internos y equipos de cumplimiento. La base es el primer modelo GLM-5 nativamente multimodalde Z.ai. Tiene 320B de parámetros totales con 18B activos. Combina atención dispersa y lineal para reducir el costo de servicio de contextos largos. Lee texto, imágenes, video y archivos, y produce texto.

¿Cómo se entrenó GLM-Legal?

El entrenamiento se ejecutó en 2 etapas:

  • Entrenamiento intermedio sobre corpus legales ampliados, para fortalecer el razonamiento desde los hechos hasta las reglas y hasta las conclusiones.
  • Post-entrenamiento con aprendizaje por refuerzo en decenas de miles de entornos de tareas legales.

El equipo de Z.ai también describe el harness de agente coevolucionando con el modelo durante el post-entrenamiento. Los casos límite en el entrenamiento expusieron cuellos de botella del harness. Las correcciones del harness expusieron luego al modelo a restricciones más realistas.

¿Cómo puntúa GLM-Legal en el Legal Agent Benchmark de Harvey?

Harvey LAB es un benchmark de código abierto con 1,250 tareas en 24 áreas de práctica. Más de 75,000 criterios de rúbrica redactados por expertos califican el trabajo. Una tarea solo se aprueba si se aprueba cada criterio. Harvey llama a esto calificación all-pass.

Vals AI ejecuta el conjunto reservado con 2 jueces LLM e internet desactivado. Los agentes reciben herramientas de archivos además de docx, pptx y xlsx habilidades.

En esa tabla de clasificación, GLM-Legal puntúa 19.17% y ocupa el puesto #7 de 79. Su base, GLM-5.3-Flash, puntúa 6.67%. La mejora de 12.5 puntos es la afirmación central, y un evaluador independiente la reprodujo.

El gráfico de lanzamiento de Z.ai muestra a GLM-Legal por delante de Kimi K3 (12.92%), Claude Fable 5 (11.25%) y GPT-6 Astra (5.42%). Esas cifras coinciden con Vals AI. El gráfico omite 6 modelos clasificados más arriba, encabezados por Muse Spark 1.2 con 25.42%.

GLM-Legal también aprueba el 92.5% de los criterios individuales. Los modelos principales se sitúan cerca del 90% al 95% en esa medida.

¿Iguala GLM-Legal a los modelos frontera en LegalBench?

Aproximadamente. Z.ai afirma paridad en LegalBench y en el PLawBench centrado en chino sin publicar cifras. Vals AI puntúa GLM-Legal con 86.23% en LegalBench. Claude Fable 5 lidera con 88.56%. Kimi K3 puntúa 86.21%.

¿Cómo se compara GLM-Legal con Kimi K3, Claude Fable 5 y GPT-6 Astra?

GLM-LegalGLM-5.3-Flash (base)Kimi K3Claude Fable 5GPT-6 Astra
DesarrolladorZ.aiZ.aiMoonshot AIAnthropicOpenAI
Parámetros totales / activosConstruido sobre base de 320B / 18B320B / 18B2.8T / 104BNo divulgadoNo divulgado
Ventana de contexto1M1M1M1M1M
Pesos / licenciaSin pesos públicosAbierta, MITAbierta, Kimi K3 LicensePropietariaPropietaria
Harvey LAB (aprobación de tareas)19.17%6.67%12.92%11.25%5.42%
LegalBench86.23%83.93%86.21%88.56%No listado por Vals
Legal Research Bench41.83%45.19%46.15%49.52%39.42%
Costo por prueba de Harvey LAB$0.15$0.57$3.83$19.23$26.16
Duración media de Harvey LAB1h12m52m17s13m58s26m53s24m49s
Precio de API (entrada / salida, por 1M de tokens)No publicado$0.15 / $0.50$3 / $15$10 / $50$10 / $50
AccesoAPI por solicitudAPI, Hugging FaceAPI, Hugging FaceAPIAPI

Todas las puntuaciones de benchmarks, costos y duraciones provienen de las ejecuciones de Vals AI a fecha del 12 de octubre de 2026. Vals ejecutó ambos modelos GLM a $0.075 / $0.25 por 1M de tokens.

¿Cómo pueden los desarrolladores acceder a GLM-Legal?

Los despachos de abogados, las empresas de legal-tech y los equipos internos pueden solicitar acceso a la API. Z.ai no ha publicado ningún precio. No existe un repositorio de GLM-Legal en Hugging Face a fecha del 13 de octubre de 2026. Z.ai dice que GLM-Legal llegará a AutoClaw, su aplicación de agente de escritorio, pero no dio ninguna fecha.

El modelo base está disponible hoy a $0.15 / $0.50 por 1M de tokens. Los equipos pueden prototipar pipelines con él y luego cambiar el ID del modelo más adelante.

Conclusiones clave

  • GLM-Legal obtiene 19.17% en Harvey LAB, frente al 6.67% de su modelo base.
  • Ocupa el puesto #7 de 79 en Vals AI, por detrás de 6 modelos de Meta y Google.
  • Cuesta $0.15 por prueba de Harvey LAB, frente a $19.23 de Claude Fable 5.
  • Legal Research Bench cayó 3.36 puntos frente a GLM-5.3-Flash.
  • El acceso es solo por solicitud, sin precio ni pesos publicados.


Echa un vistazo al Blog tecnológico de Z.ai, el leaderboard de Vals AI Harvey LAB y la ficha del modelo GLM-5.3-Flash. Solicita acceso a la API aquí.. Todo el mérito es del investigador de este proyecto. Además, no dudes en seguirnos en Twitter y no olvides unirte a nuestro 150k+ML SubReddit y suscribirte a nuestro boletín. ¡Espera! ¿estás en telegram? ahora también puedes unirte a nosotros en telegram.

La entrada Z.ai GLM-Legal supera a Claude Fable 5 y Kimi K3 en Harvey LAB apareció primero en MarkTechPost.

Fuente original

MarkTechPost

Notas sobre el contenido

La publicación original y los derechos pertenecen a la fuente.

Traducción automática · Consulte el original