llama.cpp ReleasesMis à jour le

[Pre-release / build continu] b11554

[Pre-release / build continu] vulkan : gérer les doublons de mul_mat_id dans la prépasse plutôt que d'effectuer une boucle (#29998) * vulkan : calculer chaque ligne d'un expert dans mul_mm_id lorsque les ids se répètent…

Pre-release / build continu : il s'agit d'une version expérimentale, et non d'une version stable.

vulkan : gérer les doublons de mul_mat_id dans la prépasse plutôt que d'effectuer une boucle (#29998) * vulkan : calculer chaque ligne d'un expert dans mul_mm_id lorsque les ids se répètent * vulkan : gérer les doublons de mul_mat_id dans la prépasse plutôt que d'effectuer une boucle Étendre l'optimisation "hoist row ids" pour qu'elle soit toujours activée et pour qu'elle émette une liste compacte de descriptions de tuiles devant s'exécuter, et pour qu'elle émette plusieurs tuiles si nécessaire. On peut ainsi lancer une borne supérieure plus resserrée sur le nombre de workgroups et la fin peut sortir précocement de manière triviale. --------- Co-authored-by : Anjielon <[EMAIL_REDACTED]>

Site web : - https://llama.app

Attestations : - https://github.com/ggml-org/llama.cpp/attestations/54792062

macOS/iOS : - macOS Apple Silicon (arm64) - macOS Apple Silicon (arm64, KleidiAI activé) DÉSACTIVÉ - macOS Intel (x64) - XCFramework iOS

Linux : - Ubuntu x64 (CPU) - Ubuntu arm64 (CPU) - Ubuntu s390x (CPU) - Ubuntu x64 (Vulkan) - Ubuntu arm64 (Vulkan) - Ubuntu x64 (CUDA 12) - bibliothèques CUDA 12.8 - Ubuntu x64 (CUDA 13) - bibliothèques CUDA 13.4 - Ubuntu arm64 (CUDA 13) - bibliothèques CUDA 13.4 - Ubuntu x64 (ROCm 10.0) - Ubuntu x64 (OpenVINO) - Ubuntu x64 (SYCL FP32) - Ubuntu x64 (SYCL FP16) - Linux arm64 (Snapdragon : CPU, GPU Adreno, NPU Hexagon) - guide d'installation

Android : - Android arm64 (CPU) - Android arm64 (Snapdragon : CPU, GPU Adreno, NPU Hexagon) - guide d'installation

Windows : - Windows x64 (CPU) - Windows arm64 (CPU) - Windows arm64 (OpenCL Adreno) - Windows x64 (CUDA 12) - DLLs CUDA 12.4 - Windows x64 (CUDA 13) - DLLs CUDA 13.4 - Windows arm64 (CUDA 13) - DLLs CUDA 13.4 - Windows x64 (Vulkan) - Windows arm64 (Vulkan) - Windows x64 (OpenVINO) - Windows x64 (SYCL) - Windows x64 (ROCm 10.0)

openEuler : - DÉSACTIVÉ - openEuler x86 (310p) - openEuler x86 (910b, ACL Graph) - openEuler aarch64 (310p) - openEuler aarch64 (910b, ACL Graph)

UI : - UI

Source originale

llama.cpp Releases

À propos du contenu

La publication originale et les droits appartiennent à la source.

Traduction automatique · Consultez l’original