A Windows desktop application for evaluating local GGUF models served by llama.cpp. It scans a models folder, starts or attaches to a llama-server on 127.0.0.1:8080, and runs configurable test-case suites covering logic, code, format compliance, instruction following, generation speed and long-context handling. Each answer is graded by an automatic check - substring, regex, JSON schema, code execution, LLM-as-judge or embedding similarity - with skipped checks kept out of the score instead of counted as failures. Runs are stored in a SQLite history with per-case drill-down and side-by-side comparison, and can be exported as an HTML report or printed. Also includes a local agent mode that uses the tested model as a subagent, and reports prefill and generation speed, time to first token, model memory usage and layer placement from the server log.
Väljaandja kirjeldus (inglise)
Mis on LLM Test Bench?
LLM Test Bench on avatud lähtekoodiga Windowsi programm kategooriast „TI-assistendid ja keelemudelid“. Väljaandja: aleksandrreva-eng.
Paigaldamine ja nõuded
Ametlikud paigaldusfailid on olemas järgmistele arhitektuuridele: 64-bitine; vorming MSI. Selle saab paigaldada ainult praegusele kasutajale, ilma administraatori õigusteta. Paigaldaja toetab järelevalveta (vaikset) paigaldust. Rühmapoliitika, Intune’i või Configuration Manageri kaudu juurutamiseks on olemas MSI-pakett.
Plussid / Miinused
Plussid
- Avatud lähtekood: koodi saab igaüks üle vaadata ja ise kompileerida
- MSI-pakett hallatud juurutuseks
- Dokumenteeritud vaikne paigaldus
- Paigaldub ilma administraatori õigusteta
- Uuendatud viimase kahe kuu jooksul
Miinused
- Natiivne ARM64-versioon puudub
Kokkuvõttes: LLM Test Bench on avatud lähtekoodiga Windowsi tööriist kategooriast „TI-assistendid ja keelemudelid“ (64-bitine). Administraatorid saavad selle paigaldada järelevalveta.
Kas programmi LLM Test Bench allalaadimine on ohutu?
- Faili jagab github.com, väljaandja enda domeen
- Allalaadimislink kasutab HTTPS-i
- SHA256-räsi on avaldatud, nii et faili saab kontrollida:
F2727924C77D44CC79431CEDF1B03A5649E0293F2E8F73D94C108B611ADFF0BD· Ava selle räsi VirusTotali aruanne - Linki pole veel kontrollitud
- Lähtekood on avalik
- ExeAtlas ei majuta, ümbrista ega muuda paigaldusfaile
Seotud juhend: Kuidas kontrollida faili SHA256-räsi Windowsis
Viimased versioonid
Ainus versioon ›| Versioon | Kuupäev | Suurus | Failid |
|---|---|---|---|
| 1.0.0Uusim | 29. september 2026 | — | 64-bitine MSI |
Paigaldamine käsurealt
Vaikne paigaldus ›winget install --id aleksandrreva-eng.llm-test-bench -emsiexec /i LLMTestBench-1.0.0.msi /qn /norestartmsiexec /x {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E} /qn /norestartSeotud juhend: Kuidas kasutada wingetit: paigaldus ja uuendamine
Teave
- Väljaandja
- aleksandrreva-eng
- Kategooria
- TI-assistendid ja keelemudelid
- Litsents
- MIT
- Hind
- Tasuta
- Nõuded
- Windows 11 / 10
- Arhitektuur
- 64-bitine
- Paigaldaja
- MSI
- Versioon
- 1.0.0
- Avaldatud
- 29. september 2026
- Lisatud kataloogi
- 20. november 2026
- Versioone kataloogis
- 1
- Allalaadimised ExeAtlase kaudu
- 1
- Veebileht
- github.com
- winget ID
- aleksandrreva-eng.llm-test-bench
- MSI tootekood
- {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E}
Hinnangud ja arvustused
Arvustusi veel pole. Hinda esimesena.
Programmi LLM Test Bench alternatiivid
Vaata kõiki ›-
Avatud lähtekood20,2 tuh ↓ -
Suletud lähtekood73,6 tuh ↓ -
Avatud lähtekood17,1 tuh ↓ -
Avatud lähtekood8,7 tuh ↓ -
Avatud lähtekood3,5 tuh ↓ -
Avatud lähtekood1,8 tuh ↓ -
Avatud lähtekood14,9 tuh ↓ -
Avatud lähtekood950 ↓
Korduma kippuvad küsimused
Kas LLM Test Bench on tasuta?
Jah. LLM Test Bench on avatud lähtekoodiga tarkvara (litsents MIT).
Kas programmi LLM Test Bench allalaadimine on ohutu?
Fail laaditakse alla aadressilt github.com, mis kuulub väljaandjale; ExeAtlas faili ei majuta ega muuda. Võrdle faili SHA256-räsi siin näidatuga või ava selle räsi VirusTotali aruanne.
Kuidas paigaldada programmi LLM Test Bench wingetiga?
Ava PowerShell või Windows Terminal ja käivita sellel lehel näidatud winget-käsk. winget laadib alla ametliku paigaldusfaili ja kontrollib enne käivitamist selle SHA256-räsi.
Kas programmi LLM Test Bench saab paigaldada vaikselt?
Jah. Vaikse paigalduse lehel on iga paigaldaja jaoks täpne käsk, sealhulgas MSI-paketi msiexec-käsk.
Kas LLM Test Bench töötab ARM-protsessoriga (Windows on Arm)?
ARM64-versiooni pole; Windows 11 on Arm saab 64-bitine versiooni käivitada emulatsiooni abil.
Kas programmi LLM Test Bench saab kasutada ilma administraatori õigusteta?
Jah, olemas on kasutajapõhine paigaldaja, mis ei vaja administraatori õigusi.
Millised on programmi LLM Test Bench alternatiivid?
Codex CLI, Claude Code, ChatGPT by lencx, GPT4All ja Jan. Alternatiivide leht võrdleb neid.