A Windows desktop application for evaluating local GGUF models served by llama.cpp. It scans a models folder, starts or attaches to a llama-server on 127.0.0.1:8080, and runs configurable test-case suites covering logic, code, format compliance, instruction following, generation speed and long-context handling. Each answer is graded by an automatic check - substring, regex, JSON schema, code execution, LLM-as-judge or embedding similarity - with skipped checks kept out of the score instead of counted as failures. Runs are stored in a SQLite history with per-case drill-down and side-by-side comparison, and can be exported as an HTML report or printed. Also includes a local agent mode that uses the tested model as a subagent, and reports prefill and generation speed, time to first token, model memory usage and layer placement from the server log.
Leidėjo aprašymas (anglų)
Kas yra LLM Test Bench?
LLM Test Bench – atvirojo kodo programa, skirta Windows, iš kategorijos „DI asistentai ir LLM“. Leidėjas – aleksandrreva-eng.
Diegimas ir sistemos reikalavimai
Oficialūs diegimo failai yra skirti 64 bitų sistemoms, formatai: MSI. Ją galima įdiegti tik dabartiniam naudotojui, be administratoriaus teisių. Diegimo failas palaiko tylųjį diegimą be naudotojo įsikišimo. Yra MSI paketas, skirtas diegti per grupės strategiją (Group Policy), „Intune“ arba „Configuration Manager“.
Privalumai / Trūkumai
Privalumai
- Atvirasis kodas: bet kas gali jį peržiūrėti ir sukompiliuoti
- MSI paketas centralizuotam diegimui
- Dokumentuotas tylusis diegimas
- Įdiegiama be administratoriaus teisių
- Atnaujinta per pastaruosius du mėnesius
Trūkumai
- Nėra natūralios ARM64 versijos
Trumpai: LLM Test Bench – atvirojo kodo programa, skirta Windows (kategorija „DI asistentai ir LLM“), prieinama 64 bitų sistemoms. Administratoriai gali ją diegti be naudotojo įsikišimo.
Ar saugu atsisiųsti programą LLM Test Bench?
- Failas atsisiunčiamas iš leidėjo domeno (github.com)
- Atsisiuntimo nuoroda naudoja HTTPS
- Paskelbta SHA256 maišos reikšmė, todėl failą galima patikrinti:
F2727924C77D44CC79431CEDF1B03A5649E0293F2E8F73D94C108B611ADFF0BD· Atidaryti šios maišos reikšmės VirusTotal ataskaitą - Nuoroda dar nepatikrinta
- Pirminis kodas viešas
- ExeAtlas diegimo failų nelaiko, neįpakuoja ir nekeičia
Susijusi instrukcija: Kaip patikrinti failo SHA256 maišos reikšmę Windows
Naujausios versijos
Visos versijos (1) ›| Versija | Data | Dydis | Failai |
|---|---|---|---|
| 1.0.0Naujausia | 2026 m. rugsėjo 29 d. | — | 64 bitų MSI |
Diegimas iš komandų eilutės
Tylusis diegimas ›winget install --id aleksandrreva-eng.llm-test-bench -emsiexec /i LLMTestBench-1.0.0.msi /qn /norestartmsiexec /x {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E} /qn /norestartSusijusi instrukcija: Kaip naudoti winget: programų diegimas ir naujinimas
Informacija
- Leidėjas
- aleksandrreva-eng
- Kategorija
- DI asistentai ir LLM
- Licencija
- MIT
- Kaina
- Nemokama
- Reikalavimai
- Windows 11 / 10
- Architektūra
- 64 bitų
- Diegimo failas
- MSI
- Versija
- 1.0.0
- Išleista
- 2026 m. rugsėjo 29 d.
- Įtraukta į katalogą
- 2026 m. lapkričio 20 d.
- Versijų skaičius
- 1
- Atsisiuntimai ExeAtlas
- 1
- Svetainė
- github.com
- winget ID
- aleksandrreva-eng.llm-test-bench
- MSI produkto kodas
- {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E}
Įvertinimai ir atsiliepimai
Atsiliepimų dar nėra. Galite įvertinti pirmas.
Programos LLM Test Bench alternatyvos
Rodyti viską ›-
Atvirasis kodas20,2 tūkst. ↓ -
Nuosavybinė licencija73,6 tūkst. ↓ -
Atvirasis kodas17,1 tūkst. ↓ -
Atvirasis kodas8,7 tūkst. ↓ -
Atvirasis kodas3,5 tūkst. ↓ -
Atvirasis kodas1,8 tūkst. ↓ -
Atvirasis kodas14,9 tūkst. ↓ -
Atvirasis kodas950 ↓
Dažniausi klausimai
Ar programa LLM Test Bench nemokama?
Taip. LLM Test Bench – atvirojo kodo programa (licencija MIT), kurią galima nemokamai atsisiųsti ir naudoti.
Ar saugu atsisiųsti programą LLM Test Bench?
Failas atsisiunčiamas iš domeno github.com, kuris priklauso leidėjui; ExeAtlas failo nelaiko ir nekeičia. Palyginkite atsisiųsto failo SHA256 maišos reikšmę su nurodyta šiame puslapyje arba atidarykite tos reikšmės VirusTotal ataskaitą.
Kaip įdiegti LLM Test Bench su winget?
Atidarykite PowerShell arba Windows Terminal ir paleiskite šiame puslapyje pateiktą winget komandą. winget atsisiunčia oficialų diegimo failą ir prieš paleisdamas patikrina jo SHA256 maišos reikšmę.
Ar LLM Test Bench galima įdiegti tyliai?
Taip. Tyliojo diegimo puslapyje pateikta tiksli komanda kiekvienam diegimo failui, įskaitant msiexec MSI paketui.
Ar LLM Test Bench veikia ARM procesoriuose (Windows on Arm)?
ARM64 versijos nėra; Windows 11 on Arm gali paleisti 64 bitų versiją emuliuodama.
Ar programą LLM Test Bench galima naudoti be administratoriaus teisių?
Taip, yra diegimo failas dabartiniam naudotojui, kuriam administratoriaus teisių nereikia.
Kokios yra programos LLM Test Bench alternatyvos?
Codex CLI, Claude Code, ChatGPT by lencx, GPT4All ir Jan. Jos palygintos alternatyvų puslapyje.