پرطرفدار: به‌روزرسانی داده‌ها: ۵ آبان ۱۴۰۵

دسته‌بندی‌ها

اینترنت۱٬۳۵۶
ارتباطات۳۲۱
صوتی و تصویری۸۹۸
گرافیک و طراحی۵۳۹
اداری و بهره‌وری۱٬۱۲۴
ابزارهای برنامه‌نویسی۳٬۱۳۴
ابزارهای هوش مصنوعی۵۲۹
امنیت و حریم خصوصی۳۸۵
ابزارهای سیستمی۳٬۱۱۴
بازی۵۲۳
آموزش و علوم۲۳۹
شبکه و IT۲۸۴

دانلود llama.cpp b9673

LLM inference in C/C++

این یک نسخه قدیمی است. نسخه فعلی b9994 است. llama.cpp b9994 · تاریخ انتشار:

فایل‌های نصب b9673

معمارینوعدامنه نصبحجم فایلدانلودSHA256
۶۴ بیتی ZIP → پرتابل — — github.com VirusTotal

لینک و هش SHA256 از مانیفست جامعه Windows Package Manager گرفته شده‌اند. پیش از اجرای فایل دانلودشده، هش آن را مقایسه کنید.

یادداشت‌های انتشار

sycl: Add optional USM system allocations (#22526)
This introduces an optional feature to allocate large GPU buffers (≥ 1GB)
using USM system allocations if supported by the device. It allows using
buffers from the system allocator then letting the system manage memory
migrations between host and device as necessary.
This feature is disabled by default and requires the GGML_SYCL_USM_SYSTEM
environment variable to enable. If USM system allocations are not supported
by the device or the system, we fallback to regular allocations.
This feature can allow VRAM overcommit. For example, the test below fails
on B580 due to lack of memory for allocation, but it passes when enabling
USM system allocations:
./examples/sycl/test.sh -m Qwen3.5-27B-Q3_K_M.gguf -lv 4
Signed-off-by: Francois Dugast francois.dugast@intel.com
macOS/iOS:
- macOS Apple Silicon (arm64)
- macOS Apple Silicon (arm64, KleidiAI enabled) DISABLED
- macOS Intel (x64)
- iOS XCFramework
Linux:
- Ubuntu x64 (CPU)
- Ubuntu arm64 (CPU)
- Ubuntu s390x (CPU)
- Ubuntu x64 (Vulkan)
- Ubuntu arm64 (Vulkan)
- Ubuntu x64 (ROCm 7.2)
- Ubuntu x64 (OpenVINO)
- Ubuntu x64 (SYCL FP32)
- Ubuntu x64 (SYCL FP16)
Android:
- Android arm64 (CPU)
Windows:
- Windows x64 (CPU)
- Windows arm64 (CPU)
- Windows x64 (CUDA 12) - CUDA 12.4 DLLs
- Windows x64 (CUDA 13) - CUDA 13.3 DLLs
- Windows x64 (Vulkan)
- Windows x64 (SYCL)
- Windows x64 (HIP)
openEuler:
- DISABLED
- openEuler x86 (310p)
- openEuler x86 (910b, ACL Graph)
- openEuler aarch64 (310p)
- openEuler aarch64 (910b, ACL Graph)
UI:
- UI

https://github.com/ggml-org/llama.cpp/releases/tag/b9673

برچسب‌ها

اشتراک‌گذاری