A Windows desktop application for evaluating local GGUF models served by llama.cpp. It scans a models folder, starts or attaches to a llama-server on 127.0.0.1:8080, and runs configurable test-case suites covering logic, code, format compliance, instruction following, generation speed and long-context handling. Each answer is graded by an automatic check - substring, regex, JSON schema, code execution, LLM-as-judge or embedding similarity - with skipped checks kept out of the score instead of counted as failures. Runs are stored in a SQLite history with per-case drill-down and side-by-side comparison, and can be exported as an HTML report or printed. Also includes a local agent mode that uses the tested model as a subagent, and reports prefill and generation speed, time to first token, model memory usage and layer placement from the server log.
Utgivarens beskrivning (engelska)
Vad är LLM Test Bench?
LLM Test Bench är ett Windowsprogram med öppen källkod från aleksandrreva-eng i kategorin AI-assistenter och LLM.
Installation och systemkrav
Det finns officiella installationsfiler för 64-bitars i formatet MSI. Det går att installera programmet bara för den aktuella användaren, utan administratörsbehörighet. Installationsfilen stöder obevakad installation utan frågor (silent install). Ett MSI-paket finns för distribution via grupprinciper, Intune eller Configuration Manager.
Fördelar / Nackdelar
Fördelar
- Öppen källkod: vem som helst kan granska och kompilera koden
- MSI-paket för central distribution
- Dokumenterad tyst installation
- Kan installeras utan administratörsbehörighet
- Uppdaterat de senaste två månaderna
Nackdelar
- Ingen inbyggd ARM64-version
Kort sagt: LLM Test Bench är ett verktyg med öppen källkod i kategorin AI-assistenter och LLM för datorer med 64-bitars. Administratörer kan distribuera det obevakat.
Är det säkert att ladda ner LLM Test Bench?
- Filen levereras av github.com, utgivarens egen domän
- Nedladdningslänken använder HTTPS
- En SHA256-hash är publicerad, så att du kan kontrollera filen:
F2727924C77D44CC79431CEDF1B03A5649E0293F2E8F73D94C108B611ADFF0BD· Öppna VirusTotal-rapporten för den här hashen - Länken har inte kontrollerats än
- Källkoden är offentlig
- ExeAtlas varken lagrar, kapslar in eller ändrar installationsfiler
Relaterad guide: Kontrollera en fils SHA256-hash i Windows
Senaste versionerna
Alla 1 versioner ›| Version | Datum | Storlek | Filer |
|---|---|---|---|
| 1.0.0Senaste | 29 september 2026 | — | 64-bitars MSI |
Installera från kommandoraden
Tyst installation ›winget install --id aleksandrreva-eng.llm-test-bench -emsiexec /i LLMTestBench-1.0.0.msi /qn /norestartmsiexec /x {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E} /qn /norestartRelaterad guide: Så använder du winget: installera och uppdatera
Information
- Utgivare
- aleksandrreva-eng
- Kategori
- AI-assistenter och LLM
- Licens
- MIT
- Pris
- Gratis
- Kräver
- Windows 11 / 10
- Arkitektur
- 64-bitars
- Installationsfil
- MSI
- Version
- 1.0.0
- Släppt
- 29 september 2026
- I katalogen sedan
- 20 november 2026
- Listade versioner
- 1
- Nedladdningar via ExeAtlas
- 1
- Webbplats
- github.com
- winget-ID
- aleksandrreva-eng.llm-test-bench
- MSI-produktkod
- {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E}
Betyg och recensioner
Inga recensioner än. Bli först med att betygsätta programmet.
Alternativ till LLM Test Bench
Visa alla ›-
Öppen källkod20,2 tn ↓ -
Proprietär73,6 tn ↓ -
Öppen källkod17,1 tn ↓ -
Öppen källkod8,7 tn ↓ -
Öppen källkod3,5 tn ↓ -
Öppen källkod1,8 tn ↓ -
Öppen källkod14,9 tn ↓ -
Öppen källkod950 ↓
Vanliga frågor
Är LLM Test Bench gratis?
Ja. LLM Test Bench är programvara med öppen källkod under licensen MIT.
Är det säkert att ladda ner LLM Test Bench?
Filen kommer från github.com, som tillhör utgivaren; ExeAtlas varken lagrar eller ändrar den. Jämför filens SHA256-hash med den som visas här, eller öppna VirusTotal-rapporten för hashen.
Hur installerar jag LLM Test Bench med winget?
Öppna PowerShell eller Windows Terminal och kör winget-kommandot som visas på den här sidan. winget laddar ner den officiella installationsfilen och kontrollerar SHA256-hashen innan den körs.
Går det att installera LLM Test Bench tyst?
Ja. Sidan om tyst installation visar det exakta kommandot för varje installationsfil, även msiexec för MSI-paketet.
Fungerar LLM Test Bench på ARM (Windows on Arm)?
Det finns ingen ARM64-version; Windows 11 on Arm kan köra versionen för 64-bitars via emulering.
Kan jag använda LLM Test Bench utan administratörsbehörighet?
Ja, det finns en installationsfil per användare som inte kräver administratörsbehörighet.
Vilka alternativ finns till LLM Test Bench?
Codex CLI, Claude Code, ChatGPT by lencx, GPT4All och Jan. Sidan med alternativ jämför dem.