A Windows desktop application for evaluating local GGUF models served by llama.cpp. It scans a models folder, starts or attaches to a llama-server on 127.0.0.1:8080, and runs configurable test-case suites covering logic, code, format compliance, instruction following, generation speed and long-context handling. Each answer is graded by an automatic check - substring, regex, JSON schema, code execution, LLM-as-judge or embedding similarity - with skipped checks kept out of the score instead of counted as failures. Runs are stored in a SQLite history with per-case drill-down and side-by-side comparison, and can be exported as an HTML report or printed. Also includes a local agent mode that uses the tested model as a subagent, and reports prefill and generation speed, time to first token, model memory usage and layer placement from the server log.
Përshkrimi i botuesit (anglisht)
Çfarë është LLM Test Bench?
LLM Test Bench është një program me burim të hapur për Windows në kategorinë „Asistentë IA dhe LLM”, nga aleksandrreva-eng.
Instalimi dhe kërkesat
Ka instalues zyrtarë për 64-bit në formatin MSI. Mund të instalohet vetëm për përdoruesin aktual, pa të drejta administratori. Instaluesi mbështet instalimin pa ndërhyrje (instalim i heshtur). Ka një paketë MSI për shpërndarje me Group Policy, Intune ose Configuration Manager.
Pikat e forta / Pikat e dobëta
Pikat e forta
- Burim i hapur: kodin mund ta shqyrtojë dhe ta kompilojë kushdo
- Paketë MSI për shpërndarje të menaxhuar
- Instalim i heshtur i dokumentuar
- Instalohet pa të drejta administratori
- Përditësuar në dy muajt e fundit
Pikat e dobëta
- Pa version vendas ARM64
Shkurtimisht: LLM Test Bench është një mjet me burim të hapur në kategorinë „Asistentë IA dhe LLM”, për kompjuterë 64-bit. Administratorët mund ta shpërndajnë pa ndërhyrje.
A është i sigurt shkarkimi i LLM Test Bench?
- Skedari shpërndahet nga github.com, domeni i vetë botuesit
- Lidhja e shkarkimit përdor HTTPS
- Është publikuar një hash SHA256, ndaj skedarin mund ta verifikoni:
F2727924C77D44CC79431CEDF1B03A5649E0293F2E8F73D94C108B611ADFF0BD· Hapni raportin e VirusTotal për këtë hash - Lidhja ende nuk është kontrolluar
- Kodi burimor është publik
- ExeAtlas nuk ruan, nuk mbështjell dhe nuk ndryshon instalues
Udhëzues i lidhur: Si të kontrolloni hash-in SHA256 të një skedari
Versionet e fundit
Të gjitha versionet (1) ›| Versioni | Data | Madhësia | Skedarët |
|---|---|---|---|
| 1.0.0I fundit | 29 shtator 2026 | — | 64-bit MSI |
Instalimi nga rreshti i komandave
Instalim i heshtur ›winget install --id aleksandrreva-eng.llm-test-bench -emsiexec /i LLMTestBench-1.0.0.msi /qn /norestartmsiexec /x {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E} /qn /norestartUdhëzues i lidhur: Si përdoret winget: instalimi dhe përditësimi i programeve
Informacion
- Botuesi
- aleksandrreva-eng
- Kategoria
- Asistentë IA dhe LLM
- Licenca
- MIT
- Çmimi
- Falas
- Kërkon
- Windows 11 / 10
- Arkitektura
- 64-bit
- Instaluesi
- MSI
- Versioni
- 1.0.0
- Publikuar
- 29 shtator 2026
- Shtuar në katalog
- 20 nëntor 2026
- Versione në listë
- 1
- Shkarkime në ExeAtlas
- 1
- Faqja e internetit
- github.com
- ID winget
- aleksandrreva-eng.llm-test-bench
- Kodi i produktit MSI
- {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E}
Vlerësime dhe komente
Ende nuk ka komente. Bëhuni i pari që e vlerësoni.
Alternativa për LLM Test Bench
Shiko të gjitha ›-
Me burim të hapur20,2 mijë ↓ -
Pronësor73,6 mijë ↓ -
Me burim të hapur17,1 mijë ↓ -
Me burim të hapur8,7 mijë ↓ -
Me burim të hapur3,5 mijë ↓ -
Me burim të hapur1,8 mijë ↓ -
Me burim të hapur14,9 mijë ↓ -
Me burim të hapur950 ↓
Pyetjet më të shpeshta
A është LLM Test Bench falas?
Po. LLM Test Bench është softuer me burim të hapur me licencën MIT.
A është i sigurt shkarkimi i LLM Test Bench?
Shkarkimi vjen nga github.com, që i përket botuesit; ExeAtlas nuk e ruan dhe nuk e ndryshon skedarin. Krahasoni hash-in SHA256 të tij me atë që tregohet këtu, ose hapni raportin e VirusTotal për këtë hash.
Si ta instaloj LLM Test Bench me winget?
Hapni PowerShell ose Windows Terminal dhe ekzekutoni komandën winget që tregohet në këtë faqe. winget shkarkon instaluesin zyrtar dhe kontrollon hash-in SHA256 para se ta ekzekutojë.
A mund të instalohet LLM Test Bench në heshtje?
Po. Faqja e instalimit të heshtur jep komandën e saktë për çdo instalues, përfshirë msiexec për paketën MSI.
A funksionon LLM Test Bench në ARM (Windows on Arm)?
Nuk ka version ARM64; Windows 11 on Arm mund ta ekzekutojë versionin 64-bit përmes emulimit.
A mund ta përdor LLM Test Bench pa të drejta administratori?
Po, ka një instalues për përdoruesin aktual që nuk kërkon të drejta administratori.
Cilat janë alternativat e LLM Test Bench?
Codex CLI, Claude Code, ChatGPT by lencx, GPT4All dhe Jan. Faqja e alternativave i krahason.