Populyar: Məlumat yeniləndi: 27 oktyabr 2026

Kateqoriyalar

İnternet1.356
Ünsiyyət321
Audio və video898
Qrafika və dizayn539
Ofis və məhsuldarlıq1.124
Tərtibatçı alətləri3.134
Süni intellekt alətləri529
Təhlükəsizlik və məxfilik385
Sistem alətləri3.114
Oyunlar523
Təhsil və elm239
Şəbəkə və İT284

llama.cpp b9873 yüklə

LLM inference in C/C++

Bu köhnə versiyadır. Son versiya: b9994. llama.cpp b9994 · Buraxılış tarixi:

Quraşdırma faylları b9873

ArxitekturaNövƏhatəFayl ölçüsüYükləSHA256
64 bit ZIP → Portativ — — github.com VirusTotal

Keçid və SHA256 Windows Paket Meneceri icma manifestindən götürülüb. Faylı işə salmazdan əvvəl heşi müqayisə edin.

Versiya qeydləri

llama : add guard for K/V rotation input when buffer is unallocated (#25215)
llm_graph_input_attn_kv::set_input and llm_graph_input_attn_kv_iswa::set_input
call set_input_k_rot / set_input_v_rot whenever the rotation tensor pointer is
non-null, but the tensor's buffer can be unallocated (NULL) when a graph only
stores K/V without attending -- e.g. DFlash speculative decoding's KV-injection
pass. set_input_k_rot then calls ggml_backend_buffer_is_host() on a NULL buffer
and aborts with GGML_ASSERT(buffer).
Guard the four k_rot/v_rot inputs with the same "&& ->buffer" check that the
adjacent kq_mask inputs already use in these two functions. When the buffer is
unallocated there is no data to upload, so skipping is correct.
Fixes #25191
Signed-off-by: liminfei-amd 91481003+liminfei-amd@users.noreply.github.com
macOS/iOS:
- macOS Apple Silicon (arm64)
- macOS Apple Silicon (arm64, KleidiAI enabled) DISABLED
- macOS Intel (x64)
- iOS XCFramework
Linux:
- Ubuntu x64 (CPU)
- Ubuntu arm64 (CPU)
- Ubuntu s390x (CPU)
- Ubuntu x64 (Vulkan)
- Ubuntu arm64 (Vulkan)
- Ubuntu x64 (ROCm 7.2)
- Ubuntu x64 (OpenVINO)
- Ubuntu x64 (SYCL FP32)
- Ubuntu x64 (SYCL FP16)
Android:
- Android arm64 (CPU)
Windows:
- Windows x64 (CPU)
- Windows arm64 (CPU)
- Windows arm64 (OpenCL Adreno)
- Windows x64 (CUDA 12) - CUDA 12.4 DLLs
- Windows x64 (CUDA 13) - CUDA 13.3 DLLs
- Windows x64 (Vulkan)
- Windows x64 (OpenVINO)
- Windows x64 (SYCL)
- Windows x64 (HIP)
openEuler:
- DISABLED
- openEuler x86 (310p)
- openEuler x86 (910b, ACL Graph)
- openEuler aarch64 (310p)
- openEuler aarch64 (910b, ACL Graph)
UI:
- UI

https://github.com/ggml-org/llama.cpp/releases/tag/b9873

Teqlər

Paylaş