A Windows desktop application for evaluating local GGUF models served by llama.cpp. It scans a models folder, starts or attaches to a llama-server on 127.0.0.1:8080, and runs configurable test-case suites covering logic, code, format compliance, instruction following, generation speed and long-context handling. Each answer is graded by an automatic check - substring, regex, JSON schema, code execution, LLM-as-judge or embedding similarity - with skipped checks kept out of the score instead of counted as failures. Runs are stored in a SQLite history with per-case drill-down and side-by-side comparison, and can be exported as an HTML report or printed. Also includes a local agent mode that uses the tested model as a subagent, and reports prefill and generation speed, time to first token, model memory usage and layer placement from the server log.
Lýsing útgefanda (enska)
Hvað er LLM Test Bench?
Forritið LLM Test Bench er opinn hugbúnaður fyrir Windows í flokknum Gervigreindaraðstoð og mállíkön. Útgefandi: aleksandrreva-eng.
Uppsetning og kröfur
Opinber uppsetningarforrit eru til fyrir 64 bita á sniðinu MSI. Hægt er að setja það upp fyrir núverandi notanda eingöngu, án stjórnandaréttinda. Uppsetningarforritið styður uppsetningu án inngrips (hljóðláta uppsetningu). MSI-pakki er til fyrir dreifingu með hópstefnu (Group Policy), Intune eða Configuration Manager.
Kostir / Gallar
Kostir
- Opinn hugbúnaður: hver sem er getur skoðað kóðann og byggt hann
- MSI-pakki fyrir miðlæga dreifingu
- Skjalfest hljóðlát uppsetning
- Uppsetning án stjórnandaréttinda
- Uppfært síðustu tvo mánuði
Gallar
- Engin sérstök ARM64-útgáfa
Í stuttu máli: Forritið LLM Test Bench er opinn hugbúnaður í flokknum Gervigreindaraðstoð og mállíkön fyrir Windows (64 bita). Kerfisstjórar geta dreift því án inngrips.
Er óhætt að sækja forritið LLM Test Bench?
- Skráin kemur frá github.com, léni útgefandans sjálfs
- Niðurhalstengillinn notar HTTPS
- SHA256-gildi er birt, svo hægt er að sannreyna skrána:
F2727924C77D44CC79431CEDF1B03A5649E0293F2E8F73D94C108B611ADFF0BD· Opna skýrslu VirusTotal fyrir þetta gildi - Tengillinn hefur ekki verið prófaður enn
- Grunnkóðinn er opinn
- ExeAtlas hýsir hvorki, pakkar inn né breytir uppsetningarforritum
Tengdar leiðbeiningar: Hvernig á að athuga SHA256-gildi skráar í Windows
Nýlegar útgáfur
Allar 1 útgáfurnar ›| Útgáfa | Dagsetning | Stærð | Skrár |
|---|---|---|---|
| 1.0.0Nýjast | 29. september 2026 | — | 64 bita MSI |
Uppsetning af skipanalínu
Hljóðlát uppsetning ›winget install --id aleksandrreva-eng.llm-test-bench -emsiexec /i LLMTestBench-1.0.0.msi /qn /norestartmsiexec /x {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E} /qn /norestartTengdar leiðbeiningar: Hvernig á að nota winget: setja upp og uppfæra forrit
Upplýsingar
- Útgefandi
- aleksandrreva-eng
- Flokkur
- Gervigreindaraðstoð og mállíkön
- Leyfi
- MIT
- Verð
- Ókeypis
- Kröfur
- Windows 11 / 10
- Högun
- 64 bita
- Uppsetningarforrit
- MSI
- Útgáfa
- 1.0.0
- Gefið út
- 29. september 2026
- Bætt í skrána
- 20. nóvember 2026
- Skráðar útgáfur
- 1
- Niðurhöl á ExeAtlas
- 1
- Vefsíða
- github.com
- winget-auðkenni
- aleksandrreva-eng.llm-test-bench
- MSI-vörukóði
- {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E}
Einkunnir og umsagnir
Engar umsagnir enn. Gefðu fyrstu einkunnina.
Valkostir í stað forritsins LLM Test Bench
Sjá allt ›-
Opinn hugbúnaður20,2 þ. ↓ -
Séreignarhugbúnaður73,6 þ. ↓ -
Opinn hugbúnaður17,1 þ. ↓ -
Opinn hugbúnaður8,7 þ. ↓ -
Opinn hugbúnaður3,5 þ. ↓ -
Opinn hugbúnaður1,8 þ. ↓ -
Opinn hugbúnaður14,9 þ. ↓ -
Opinn hugbúnaður950 ↓
Algengar spurningar
Er LLM Test Bench ókeypis?
Já. Forritið LLM Test Bench er opinn hugbúnaður með leyfinu MIT.
Er óhætt að sækja forritið LLM Test Bench?
Niðurhalið kemur frá github.com, sem er í eigu útgefandans; ExeAtlas hýsir hvorki né breytir skránni. Berið SHA256-gildi hennar saman við gildið sem hér er sýnt, eða opnið skýrslu VirusTotal fyrir það gildi.
Hvernig er LLM Test Bench sett upp með winget?
Opnið PowerShell eða Windows Terminal og keyrið winget-skipunina á þessari síðu. winget sækir opinbera uppsetningarforritið og athugar SHA256-gildi þess áður en það er keyrt.
Er hægt að setja LLM Test Bench upp hljóðlaust?
Já. Síðan um hljóðláta uppsetningu sýnir nákvæma skipun fyrir hvert uppsetningarforrit, þar á meðal msiexec fyrir MSI-pakkann.
Keyrir LLM Test Bench á ARM (Windows on Arm)?
Engin ARM64-útgáfa er til; Windows 11 on Arm getur keyrt 64 bita útgáfuna með hermun.
Er hægt að nota LLM Test Bench án stjórnandaréttinda?
Já, það er til uppsetningarforrit fyrir einn notanda sem þarf ekki stjórnandaréttindi.
Hvaða forrit koma í stað forritsins LLM Test Bench?
Codex CLI, Claude Code, ChatGPT by lencx, GPT4All og Jan. Síðan um valkosti ber þau saman.