A Windows desktop application for evaluating local GGUF models served by llama.cpp. It scans a models folder, starts or attaches to a llama-server on 127.0.0.1:8080, and runs configurable test-case suites covering logic, code, format compliance, instruction following, generation speed and long-context handling. Each answer is graded by an automatic check - substring, regex, JSON schema, code execution, LLM-as-judge or embedding similarity - with skipped checks kept out of the score instead of counted as failures. Runs are stored in a SQLite history with per-case drill-down and side-by-side comparison, and can be exported as an HTML report or printed. Also includes a local agent mode that uses the tested model as a subagent, and reports prefill and generation speed, time to first token, model memory usage and layer placement from the server log.
Naşirin təsviri (ingilis)
LLM Test Bench nədir?
LLM Test Bench aleksandrreva-eng naşirinin buraxdığı açıq mənbəli Windows proqramıdır (si köməkçiləri və llm).
Quraşdırma və tələblər
Rəsmi quraşdırma faylları 64 bit Windows üçün MSI formatında təqdim olunur. Administrator hüquqları olmadan yalnız cari istifadəçi üçün quraşdırmaq olar. Quraşdırma faylı sual vermədən (səssiz) quraşdırmanı dəstəkləyir. Qrup Siyasəti, Intune və ya Configuration Manager ilə yaymaq üçün MSI paketi var.
Üstünlüklər / Çatışmazlıqlar
Üstünlüklər
- Açıq mənbə: kodu hər kəs yoxlaya və yığa bilər
- Mərkəzləşdirilmiş yaymaq üçün MSI paketi
- Sənədləşdirilmiş səssiz quraşdırma
- Administrator hüquqları olmadan quraşdırılır
- Son iki ayda yenilənib
Çatışmazlıqlar
- Yerli ARM64 versiyası yoxdur
Qısaca: LLM Test Bench 64 bit kompüterlər üçün açıq mənbəli alətdir (si köməkçiləri və llm). Sistem administratorları onu sual vermədən yaya bilər.
LLM Test Bench proqramını yükləmək təhlükəsizdirmi?
- Fayl naşirin öz domenindən (github.com) gəlir
- Yükləmə keçidi HTTPS istifadə edir
- SHA256 heşi dərc olunub, faylı yoxlaya bilərsiniz:
F2727924C77D44CC79431CEDF1B03A5649E0293F2E8F73D94C108B611ADFF0BD· Bu heş üçün VirusTotal hesabatını açın - Keçid hələ yoxlanılmayıb
- Mənbə kodu açıqdır
- ExeAtlas quraşdırma fayllarını saxlamır, bükmür və dəyişmir
Əlaqəli təlimat: Windows-da faylın SHA256 heşini necə yoxlamaq olar
Son versiyalar
Bütün 1 versiya ›| Versiya | Tarix | Ölçü | Fayllar |
|---|---|---|---|
| 1.0.0Son versiya | 29 sentyabr 2026 | — | 64 bit MSI |
Əmr sətrindən quraşdırma
Səssiz quraşdırma ›winget install --id aleksandrreva-eng.llm-test-bench -emsiexec /i LLMTestBench-1.0.0.msi /qn /norestartmsiexec /x {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E} /qn /norestartƏlaqəli təlimat: winget necə istifadə olunur: quraşdırma və yeniləmə
Məlumat
- Naşir
- aleksandrreva-eng
- Kateqoriya
- Sİ köməkçiləri və LLM
- Lisenziya
- MIT
- Qiymət
- Pulsuz
- Tələb
- Windows 11 / 10
- Arxitektura
- 64 bit
- Quraşdırma növü
- MSI
- Versiya
- 1.0.0
- Buraxılış tarixi
- 29 sentyabr 2026
- Kataloqa əlavə olunub
- 20 noyabr 2026
- Qeydə alınmış versiya
- 1
- ExeAtlas-dan yükləmə
- 1
- Rəsmi sayt
- github.com
- winget ID
- aleksandrreva-eng.llm-test-bench
- MSI məhsul kodu
- {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E}
Qiymətlər və rəylər
Hələ rəy yoxdur. İlk qiyməti siz verin.
LLM Test Bench alternativləri
Hamısına bax ›-
Açıq mənbə20,2K ↓ -
Qapalı kod73,6K ↓ -
Açıq mənbə17,1K ↓ -
Açıq mənbə8,7K ↓ -
Açıq mənbə3,5K ↓ -
Açıq mənbə1,8K ↓ -
Açıq mənbə14,9K ↓ -
Açıq mənbə950 ↓
Tez-tez verilən suallar
LLM Test Bench pulsuzdurmu?
Bəli. LLM Test Bench açıq mənbəli proqramdır (MIT lisenziyası).
LLM Test Bench proqramını yükləmək təhlükəsizdirmi?
Fayl github.com ünvanından yüklənir; bu ünvan naşirə məxsusdur. ExeAtlas faylı saxlamır və dəyişmir. Yüklədiyiniz faylın SHA256 heşini burada göstərilənlə müqayisə edə və ya bu heş üçün VirusTotal hesabatını aça bilərsiniz.
LLM Test Bench proqramı winget ilə necə quraşdırılır?
PowerShell və ya Windows Terminal açın və bu səhifədəki winget əmrini işə salın. winget rəsmi quraşdırma faylını yükləyir və işə salmazdan əvvəl SHA256 heşini yoxlayır.
LLM Test Bench proqramını səssiz quraşdırmaq olarmı?
Bəli. Səssiz quraşdırma səhifəsində hər quraşdırma faylı üçün dəqiq əmr var, MSI paketi üçün msiexec əmri də daxil olmaqla.
LLM Test Bench ARM prosessorda (Windows on Arm) işləyirmi?
ARM64 versiyası yoxdur; Windows 11 on Arm 64 bit versiyasını emulyasiya ilə işə sala bilər.
LLM Test Bench proqramından administrator hüquqları olmadan istifadə etmək olarmı?
Bəli, administrator hüquqları tələb etməyən istifadəçi üzrə quraşdırma faylı var.
LLM Test Bench alternativləri hansılardır?
Codex CLI, Claude Code, ChatGPT by lencx, GPT4All və Jan. Alternativlər səhifəsi onları müqayisə edir.