Pre-release / kontinuierliche Build: Dies ist eine experimentelle Build-Version, keine stabile Veröffentlichung.
Sampling: Verwenden Sie eine gierige Auswahl für geeignete Temperatur-0-Ketten (#29797) * Sampling: Verwenden Sie eine gierige Auswahl für geeignete Temperatur-0-Ketten Hilfe von: OpenAI Codex * Anwendung der Vorschläge von @ggerganov Mitwirkung durch: Georgi Gerganov * Sampling: Vereinfachen der gierigen Auswahl bei Temperatur-0 Ermöglichen Sie die gleiche gierige Auswahl auf den Pfaden für CPU und Grammatik/Rechenbudget. Behalten Sie die VerteilungsSampling für dynamische Temperaturen und gewünschte Wahrscheinlichkeiten bei. Behandeln Sie das häufige Verhalten bei der Auswahl des Samplers und der Wahrscheinlichkeit in den bestehenden Tests zum Sampler. Hilfe von: OpenAI Codex * Sampling: Verwenden Sie eine gierige Auswahl nach der finalen Top-k mit k=1. Hilfe von: OpenAI Codex * Cont: Reinigung --------- Mitverfasser: Georgi GerganovWebseite: - https://llama.app
Attestationen: - https://github.com/ggml-org/llama.cpp/attestations/53574365
macOS/iOS: - macOS Apple Silicon (arm64) - macOS Apple Silicon (arm64, KleidiAI aktiviert) DEACTIVIERT - macOS Intel (x64) - iOS XCFramework
Linux: - Ubuntu x64 (CPU) - Ubuntu arm64 (CPU) - Ubuntu s390x (CPU) - Ubuntu x64 (Vulkan) - Ubuntu arm64 (Vulkan) - Ubuntu x64 (CUDA 12) - CUDA 12.8 Bibliotheken - Ubuntu x64 (CUDA 13) - CUDA 13.4 Bibliotheken - Ubuntu arm64 (CUDA 13) - CUDA 13.4 Bibliotheken - Ubuntu x64 (ROCm 10.0) - Ubuntu x64 (OpenVINO) - Ubuntu x64 (SYCL FP32) - Ubuntu x64 (SYCL FP16) - Linux arm64 (Snapdragon: CPU, Adreno-GPU, Hexagon-NPU) - Setup-Guide
Android: - Android arm64 (CPU) - Android arm64 (Snapdragon: CPU, Adreno-GPU, Hexagon-NPU) - Setup-Guide
Windows: - Windows x64 (CPU) - Windows arm64 (CPU) - Windows arm64 (OpenCL Adreno) - Windows x64 (CUDA 12) - CUDA 12.4 DLLs - Windows x64 (CUDA 13) - CUDA 13.4 DLLs - Windows arm64 (CUDA 13) - CUDA 13.4 DLLs - Windows x64 (Vulkan) - Windows arm64 (Vulkan) - Windows x64 (OpenVINO) - Windows x64 (SYCL) - Windows x64 (ROCm 10.0)
openEuler: - DEACTIVIERT - openEuler x86 (310p) - openEuler x86 (910b, ACL Graph) - openEuler aarch64 (310p) - openEuler aarch64 (910b, ACL Graph)
UI: - UI