Pre-Release / Continuous Build: Dies ist ein experimenteller Build, keine stabile Version.
model : behebe qwen4exp-Layer-Eingaben für DFlash-Drafter (#30927) qwen4exp hat das Residuum in hc-Breite [n_embd, hc, n_tokens] als t_layer_inp veröffentlicht, aber der Drafter liest Layer-Eingaben als [n_embd, n_tokens]-Zeilen: llama_context dimensioniert jeden embd_layer_inp-Puffer als n_embd * n_batch und die DFlash-Encoder-Eingabe ist n_extract * n_embd breit. Die Auswertung eines DFlash-Entwurfs über ein qwen4exp-Ziel bricht daher bei der ersten Anfrage in llama_context::extract_layer_inputs ab. Führe die Ströme vor der Weitergabe mit einem einfachen Mittelwert zusammen, wie deepseek4 es für sein Hyper-Connection-Residuum bereits tut, und bilde den Mittelwert nur für die Layer, die ein Drafter tatsächlich angefordert hat. Assisted-by: pi:llama.cpp/ggml-org/Qwen3.8-Flash-Next-GGUF (MacBook, M5 Max, 128GB)Website: - https://llama.app
Attestierungen: - https://github.com/ggml-org/llama.cpp/attestations/58746321
macOS/iOS: - macOS Apple Silicon (arm64) - macOS Apple Silicon (arm64, KleidiAI aktiviert) DEAKTIVIERT - macOS Intel (x64) - iOS XCFramework
Linux: - Ubuntu x64 (CPU) - Ubuntu arm64 (CPU) - Ubuntu s390x (CPU) - Ubuntu x64 (Vulkan) - Ubuntu arm64 (Vulkan) - Ubuntu x64 (CUDA 12) - CUDA 12.8 libraries - Ubuntu x64 (CUDA 13) - CUDA 13.4 libraries - Ubuntu arm64 (CUDA 13) - CUDA 13.4 libraries - Ubuntu x64 (ROCm 10.0) - Ubuntu x64 (OpenVINO) - Ubuntu x64 (SYCL FP32) - Ubuntu x64 (SYCL FP16) - Linux arm64 (Snapdragon: CPU, Adreno GPU, Hexagon NPU) - Einrichtungsanleitung
Android: - Android arm64 (CPU) - Android arm64 (Snapdragon: CPU, Adreno GPU, Hexagon NPU) - Einrichtungsanleitung
Windows: - Windows x64 (CPU) - Windows arm64 (CPU) - Windows arm64 (OpenCL Adreno) - Windows x64 (CUDA 12) - CUDA 12.4 DLLs - Windows x64 (CUDA 13) - CUDA 13.4 DLLs - Windows arm64 (CUDA 13) - CUDA 13.4 DLLs - Windows x64 (Vulkan) - Windows arm64 (Vulkan) - Windows x64 (OpenVINO) - Windows x64 (SYCL) - Windows x64 (ROCm 10.0)
openEuler: - DEAKTIVIERT - openEuler x86 (310p) - openEuler x86 (910b, ACL Graph) - openEuler aarch64 (310p) - openEuler aarch64 (910b, ACL Graph)
UI: - UI