llama.cpp Releases

[Versión previa al lanzamiento / compilación continua] b11457

[Versión previa al lanzamiento / compilación continua] cuda : añadir soporte BF16 para XIELU (#29955) La plantilla del kernel CUDA de XIELU ya es genérica respecto al tipo de elemento; solo faltaban la aserción de tipo…

Versión previa al lanzamiento / compilación continua: esta es una compilación experimental, no una versión estable.

cuda : añadir soporte BF16 para XIELU (#29955) La plantilla del kernel CUDA de XIELU ya es genérica respecto al tipo de elemento; solo faltaban la aserción de tipo F32/F16 y el despacho else-if. Añade la rama nv_bfloat16 al lanzador y elimina la compuerta temporal supports_op en ggml-cuda.cu que rechazaba BF16+XIELU. test-backend-ops incorpora dos casos BF16 ([10,5,4,3] y [512,16,1,1]). Se regeneran docs/ops/CUDA.csv y docs/ops.md; la fila F32 de xIELU también cambia de no a yes, es decir, el registro anterior estaba desactualizado. Probado: - Mac CPU: xIELU F32/F16/BF16, 6/6 - Mac Metal: F32/F16 existentes, 4/4; BF16 aún sin soporte - RTX 4090 CUDA: xIELU F32/F16/BF16, 6/6 - RTX 4090 CUDA solo BF16: 2/2 - git diff --check pasa

Sitio web: - https://llama.app

Atestaciones: - https://github.com/ggml-org/llama.cpp/attestations/53344987

macOS/iOS: - macOS Apple Silicon (arm64) - macOS Apple Silicon (arm64, KleidiAI habilitado) DISABLED - macOS Intel (x64) - iOS XCFramework

Linux: - Ubuntu x64 (CPU) - Ubuntu arm64 (CPU) - Ubuntu s390x (CPU) - Ubuntu x64 (Vulkan) - Ubuntu arm64 (Vulkan) - Ubuntu x64 (CUDA 12) - Bibliotecas CUDA 12.8 - Ubuntu x64 (CUDA 13) - Bibliotecas CUDA 13.4 - Ubuntu arm64 (CUDA 13) - Bibliotecas CUDA 13.4 - Ubuntu x64 (ROCm 10.0) - Ubuntu x64 (OpenVINO) - Ubuntu x64 (SYCL FP32) - Ubuntu x64 (SYCL FP16) - Linux arm64 (Snapdragon: CPU, GPU Adreno, NPU Hexagon) - guía de configuración

Android: - Android arm64 (CPU) - Android arm64 (Snapdragon: CPU, GPU Adreno, NPU Hexagon) - guía de configuración

Windows: - Windows x64 (CPU) - Windows arm64 (CPU) - Windows arm64 (OpenCL Adreno) - Windows x64 (CUDA 12) - CUDA 12.4 DLLs - Windows x64 (CUDA 13) - CUDA 13.4 DLLs - Windows arm64 (CUDA 13) - CUDA 13.4 DLLs - Windows x64 (Vulkan) - Windows arm64 (Vulkan) - Windows x64 (OpenVINO) - Windows x64 (SYCL) - Windows x64 (ROCm 10.0)

openEuler: - DISABLED - openEuler x86 (310p) - openEuler x86 (910b, ACL Graph) - openEuler aarch64 (310p) - openEuler aarch64 (910b, ACL Graph)

UI: - UI

Fuente original

llama.cpp Releases

Notas sobre el contenido

La publicación original y los derechos pertenecen a la fuente.

Traducción automática · Consulte el original