사전 릴리스 / 연속 빌드: 실험적 빌드이며 안정 릴리스가 아닙니다.
nemotron : 비표준 GQA, BPE 토크나이저 및 domyn-small pre-type 지원 (#23343) * nemotron : 비표준 GQA, BPE 토크나이저 및 domyn-small pre-type 지원 * gguf-py : Metaspace prepend_scheme을 GGUF 메타데이터로 기록 * vocab : metaspace prepend_scheme을 enum으로 파싱하고 키 이름 변경 * vocab : detokenize에서 metaspace prepend_scheme 사용, 다른 토크나이저를 위한 TODO 추가 * vocab : metaspace 이스케이프된 공백에 상수 사용 --------- Co-authored-by: Martin Cimmino웹사이트: - https://llama.app
증명(Attestations): - https://github.com/ggml-org/llama.cpp/attestations/58641317
macOS/iOS: - macOS Apple Silicon (arm64) - macOS Apple Silicon (arm64, KleidiAI 활성화) 비활성화됨 - macOS Intel (x64) - iOS XCFramework
Linux: - Ubuntu x64 (CPU) - Ubuntu arm64 (CPU) - Ubuntu s390x (CPU) - Ubuntu x64 (Vulkan) - Ubuntu arm64 (Vulkan) - Ubuntu x64 (CUDA 12) - CUDA 12.8 라이브러리 - Ubuntu x64 (CUDA 13) - CUDA 13.4 라이브러리 - Ubuntu arm64 (CUDA 13) - CUDA 13.4 라이브러리 - Ubuntu x64 (ROCm 10.0) - Ubuntu x64 (OpenVINO) - Ubuntu x64 (SYCL FP32) - Ubuntu x64 (SYCL FP16) - Linux arm64 (Snapdragon: CPU, Adreno GPU, Hexagon NPU) - 설정 가이드
Android: - Android arm64 (CPU) - Android arm64 (Snapdragon: CPU, Adreno GPU, Hexagon NPU) - 설정 가이드
윈도우(Windows): - 윈도우 x64 (CPU) - 윈도우 arm64 (CPU) - 윈도우 arm64 (OpenCL Adreno) - 윈도우 x64 (CUDA 12) - CUDA 12.4 DLL 모음 - 윈도우 x64 (CUDA 13) - CUDA 13.4 DLL 모음 - 윈도우 arm64 (CUDA 13) - CUDA 13.4 DLL 모음 - 윈도우 x64 (Vulkan) - 윈도우 arm64 (Vulkan) - 윈도우 x64 (OpenVINO) - 윈도우 x64 (SYCL) - 윈도우 x64 (ROCm 10.0)
openEuler: - DISABLED - openEuler x86(310p) 환경 - openEuler x86(910b, ACL Graph) 환경 - openEuler aarch64(310p) 환경 - openEuler aarch64(910b, ACL Graph) 환경
UI: - UI