llama.cpp Releases수정일

[Pre-release / continuous build] b11554

[사전 릴리스 / continuous build] vulkan: 반복문 대신 prepass에서 mul_mat_id 중복 처리 (#29998) * vulkan: ids가 반복될 때 mul_mm_id에서 expert의 모든 row를 계산 * vulkan: 반복문 대신 prepass에서 mul_mat_id 중복 처리 "hoist row ids" 최적화를 항상 활성화되도록 확장하고, 실행해야 하는…

사전 릴리스 / continuous build: 실험적 빌드이며 안정 릴리스가 아닙니다.

vulkan: 반복문 대신 prepass에서 mul_mat_id 중복 처리 (#29998) * vulkan: ids가 반복될 때 mul_mm_id에서 expert의 모든 row를 계산 * vulkan: 반복문 대신 prepass에서 mul_mat_id 중복 처리 "hoist row ids" 최적화를 항상 활성화되도록 확장하고, 실행해야 하는 tile 설명의 압축된 목록을 내보내며, 필요할 때 여러 tile을 내보내도록 합니다. 그러면 workgroup 수에 대해 더 타이트한 상한을 사용해 실행을 시작할 수 있고 tail은 간단히 조기 종료할 수 있습니다. --------- Co-authored-by: Anjielon <[EMAIL_REDACTED]>

웹사이트: - https://llama.app

Attestations: - https://github.com/ggml-org/llama.cpp/attestations/54792062

macOS/iOS: - macOS Apple Silicon (arm64) - macOS Apple Silicon (arm64, KleidiAI 활성화) 비활성화됨(DISABLED) - macOS Intel (x64) - iOS XCFramework

Linux: - Ubuntu x64 (CPU) - Ubuntu arm64 (CPU) - Ubuntu s390x (CPU) - Ubuntu x64 (Vulkan) - Ubuntu arm64 (Vulkan) - Ubuntu x64 (CUDA 12) - CUDA 12.8 라이브러리 - Ubuntu x64 (CUDA 13) - CUDA 13.4 라이브러리 - Ubuntu arm64 (CUDA 13) - CUDA 13.4 라이브러리 - Ubuntu x64 (ROCm 10.0) - Ubuntu x64 (OpenVINO) - Ubuntu x64 (SYCL FP32) - Ubuntu x64 (SYCL FP16) - Linux arm64 (Snapdragon: CPU, Adreno GPU, Hexagon NPU) - 설정 가이드

Android: - Android arm64 (CPU) - Android arm64 (Snapdragon: CPU, Adreno GPU, Hexagon NPU) - 설정 가이드

윈도우(Windows): - 윈도우 x64 (CPU) - 윈도우 arm64 (CPU) - 윈도우 arm64 (OpenCL Adreno) - 윈도우 x64 (CUDA 12) - CUDA 12.4 DLL - 윈도우 x64 (CUDA 13) - CUDA 13.4 DLL - 윈도우 arm64 (CUDA 13) - CUDA 13.4 DLL - 윈도우 x64 (Vulkan) - 윈도우 arm64 (Vulkan) - 윈도우 x64 (OpenVINO) - 윈도우 x64 (SYCL) - 윈도우 x64 (ROCm 10.0)

openEuler: - DISABLED - openEuler x86 (310p) 환경 - openEuler x86 (910b, ACL Graph) 환경 - openEuler aarch64 (310p) 환경 - openEuler aarch64 (910b, ACL Graph) 환경

UI: - UI

원문 출처

llama.cpp Releases

내용 안내

원문 발행 및 권리는 출처에 있습니다.

기계 번역 · 원문을 참고하세요