A Windows desktop application for evaluating local GGUF models served by llama.cpp. It scans a models folder, starts or attaches to a llama-server on 127.0.0.1:8080, and runs configurable test-case suites covering logic, code, format compliance, instruction following, generation speed and long-context handling. Each answer is graded by an automatic check - substring, regex, JSON schema, code execution, LLM-as-judge or embedding similarity - with skipped checks kept out of the score instead of counted as failures. Runs are stored in a SQLite history with per-case drill-down and side-by-side comparison, and can be exported as an HTML report or printed. Also includes a local agent mode that uses the tested model as a subagent, and reports prefill and generation speed, time to first token, model memory usage and layer placement from the server log.
Beskrywing deur die uitgewer (Engels)
Wat is LLM Test Bench?
LLM Test Bench is ’n oopbronprogram vir Windows in die kategorie KI-assistente en LLM’s, uitgegee deur aleksandrreva-eng.
Installasie en vereistes
Daar is amptelike installeerders vir 64-bis in die vorm van MSI. Dit kan net vir die huidige gebruiker geïnstalleer word, sonder administrateurregte. Die installeerder ondersteun onbewaakte (stil) installasie. ’n MSI-pakket is beskikbaar vir ontplooiing met Groepbeleid, Intune of Configuration Manager.
Voordele / Nadele
Voordele
- Oopbron: enigeen kan die kode nagaan en self bou
- MSI-pakket vir bestuurde ontplooiing
- Gedokumenteerde stil installasie
- Installeer sonder administrateurregte
- In die afgelope twee maande bygewerk
Nadele
- Geen inheemse ARM64-weergawe nie
Kortliks: LLM Test Bench is ’n oopbronprogram in die kategorie KI-assistente en LLM’s vir 64-bis rekenaars. Administrateurs kan dit onbewaak ontplooi.
Is dit veilig om LLM Test Bench af te laai?
- Die lêer word bedien deur github.com, die uitgewer se eie domein
- Die aflaaiskakel gebruik HTTPS
- ’n SHA256-hashwaarde is gepubliseer, sodat die lêer nagegaan kan word:
F2727924C77D44CC79431CEDF1B03A5649E0293F2E8F73D94C108B611ADFF0BD· Maak die VirusTotal-verslag vir hierdie hashwaarde oop - Die skakel is nog nie nagegaan nie
- Die bronkode is openbaar
- ExeAtlas huisves, omvou of verander geen installeerders nie
Verwante gids: Hoe om ’n lêer se SHA256-hashwaarde op Windows na te gaan
Onlangse weergawes
Al 1 weergawes ›| Weergawe | Datum | Grootte | Lêers |
|---|---|---|---|
| 1.0.0Nuutste | 29 September 2026 | — | 64-bis MSI |
Installeer vanaf die opdragreël
Stil installasie ›winget install --id aleksandrreva-eng.llm-test-bench -emsiexec /i LLMTestBench-1.0.0.msi /qn /norestartmsiexec /x {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E} /qn /norestartVerwante gids: Hoe om winget te gebruik: programme installeer en bywerk
Inligting
- Uitgewer
- aleksandrreva-eng
- Kategorie
- KI-assistente en LLM’s
- Lisensie
- MIT
- Prys
- Gratis
- Vereis
- Windows 11 / 10
- Argitektuur
- 64-bis
- Installeerder
- MSI
- Weergawe
- 1.0.0
- Vrygestel
- 29 September 2026
- By die katalogus gevoeg
- 20 November 2026
- Weergawes gelys
- 1
- Aflaaie op ExeAtlas
- 1
- Webwerf
- github.com
- winget-ID
- aleksandrreva-eng.llm-test-bench
- MSI-produkkode
- {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E}
Graderings en resensies
Nog geen resensies nie. Wees die eerste om dit te gradeer.
Alternatiewe vir LLM Test Bench
Sien alles ›-
Oopbron20,2 k ↓ -
Eiendomsagteware73,6 k ↓ -
Oopbron17,1 k ↓ -
Oopbron8,7 k ↓ -
Oopbron3,5 k ↓ -
Oopbron1,8 k ↓ -
Oopbron14,9 k ↓ -
Oopbron950 ↓
Algemene vrae
Is LLM Test Bench gratis?
Ja. LLM Test Bench is oopbronsagteware onder die MIT-lisensie.
Is dit veilig om LLM Test Bench af te laai?
Die aflaai kom van github.com, wat aan die uitgewer behoort; ExeAtlas huisves of verander nie die lêer nie. Vergelyk die SHA256-hashwaarde daarvan met die een wat hier gewys word, of maak die VirusTotal-verslag vir daardie hashwaarde oop.
Hoe installeer ek LLM Test Bench met winget?
Maak PowerShell of Windows Terminal oop en voer die winget-opdrag op hierdie bladsy uit. winget laai die amptelike installeerder af en gaan die SHA256-hashwaarde na voordat dit uitgevoer word.
Kan LLM Test Bench stil geïnstalleer word?
Ja. Die bladsy oor stil installasie gee die presiese opdrag vir elke installeerder, insluitend msiexec vir die MSI-pakket.
Werk LLM Test Bench op ARM (Windows on Arm)?
Daar is geen ARM64-weergawe nie; Windows 11 on Arm kan die 64-bis-weergawe via emulasie laat loop.
Kan LLM Test Bench sonder administrateurregte gebruik word?
Ja, daar is ’n installeerder per gebruiker wat nie administrateurregte nodig het nie.
Wat is alternatiewe vir LLM Test Bench?
Codex CLI, Claude Code, ChatGPT by lencx, GPT4All en Jan. Die bladsy met alternatiewe vergelyk hulle.