A Windows desktop application for evaluating local GGUF models served by llama.cpp. It scans a models folder, starts or attaches to a llama-server on 127.0.0.1:8080, and runs configurable test-case suites covering logic, code, format compliance, instruction following, generation speed and long-context handling. Each answer is graded by an automatic check - substring, regex, JSON schema, code execution, LLM-as-judge or embedding similarity - with skipped checks kept out of the score instead of counted as failures. Runs are stored in a SQLite history with per-case drill-down and side-by-side comparison, and can be exported as an HTML report or printed. Also includes a local agent mode that uses the tested model as a subagent, and reports prefill and generation speed, time to first token, model memory usage and layer placement from the server log.
Julkaisijan kuvaus (englanti)
Mikä on LLM Test Bench?
LLM Test Bench on avoimen lähdekoodin Windows-ohjelma kategoriasta Tekoälyavustajat ja kielimallit. Sen julkaisija on aleksandrreva-eng.
Asennus ja järjestelmävaatimukset
Viralliset asennusohjelmat ovat saatavilla seuraaville: 64-bittinen, muodossa MSI. Sen voi asentaa pelkästään nykyiselle käyttäjälle ilman järjestelmänvalvojan oikeuksia. Asennusohjelma tukee valvomatonta asennusta ilman kysymyksiä. Saatavilla on MSI-paketti jakeluun ryhmäkäytännöillä, Intunella tai Configuration Managerilla.
Plussat / Miinukset
Plussat
- Avoin lähdekoodi: kuka tahansa voi tarkastella koodia ja kääntää sen itse
- MSI-paketti keskitettyyn jakeluun
- Dokumentoitu hiljainen asennus
- Asentuu ilman järjestelmänvalvojan oikeuksia
- Päivitetty kahden viime kuukauden aikana
Miinukset
- Ei natiivia ARM64-versiota
Lyhyesti: LLM Test Bench on avoimen lähdekoodin työkalu kategoriasta Tekoälyavustajat ja kielimallit (64-bittinen). Järjestelmänvalvojat voivat jakaa sen valvomattomasti.
Onko LLM Test Bench -ohjelman lataaminen turvallista?
- Tiedoston jakelee github.com, joka on julkaisijan oma verkkotunnus
- Latauslinkki käyttää HTTPS-yhteyttä
- SHA256-tiiviste on julkaistu, joten tiedoston voi tarkistaa:
F2727924C77D44CC79431CEDF1B03A5649E0293F2E8F73D94C108B611ADFF0BD· Avaa tämän tiivisteen VirusTotal-raportti - Linkkiä ei ole vielä tarkistettu
- Lähdekoodi on julkinen
- ExeAtlas ei säilytä, kääri eikä muokkaa asennusohjelmia
Aiheeseen liittyvä opas: Näin tarkistat tiedoston SHA256-tiivisteen Windowsissa
Viimeisimmät versiot
Kaikki versiot (1) ›| Versio | Päivämäärä | Koko | Tiedostot |
|---|---|---|---|
| 1.0.0Uusin | 29. syyskuuta 2026 | — | 64-bittinen MSI |
Asennus komentoriviltä
Hiljainen asennus ›winget install --id aleksandrreva-eng.llm-test-bench -emsiexec /i LLMTestBench-1.0.0.msi /qn /norestartmsiexec /x {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E} /qn /norestartAiheeseen liittyvä opas: winget-opas: ohjelmien asennus ja päivitys
Tiedot
- Julkaisija
- aleksandrreva-eng
- Kategoria
- Tekoälyavustajat ja kielimallit
- Lisenssi
- MIT
- Hinta
- Ilmainen
- Vaatimukset
- Windows 11 / 10
- Arkkitehtuuri
- 64-bittinen
- Asennusohjelma
- MSI
- Versio
- 1.0.0
- Julkaistu
- 29. syyskuuta 2026
- Lisätty luetteloon
- 20. marraskuuta 2026
- Versioita luettelossa
- 1
- Lataukset ExeAtlasin kautta
- 1
- Verkkosivusto
- github.com
- winget-tunnus
- aleksandrreva-eng.llm-test-bench
- MSI-tuotekoodi
- {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E}
Arviot ja arvostelut
Ei vielä arvosteluja. Anna ensimmäinen arvio.
Vaihtoehtoja LLM Test Bench -ohjelmalle
Näytä kaikki ›-
Avoin lähdekoodi20,2 t. ↓ -
Suljettu73,6 t. ↓ -
Avoin lähdekoodi17,1 t. ↓ -
Avoin lähdekoodi8,7 t. ↓ -
Avoin lähdekoodi3,5 t. ↓ -
Avoin lähdekoodi1,8 t. ↓ -
Avoin lähdekoodi14,9 t. ↓ -
Avoin lähdekoodi950 ↓
Usein kysytyt kysymykset
Onko LLM Test Bench ilmainen?
Kyllä. LLM Test Bench on avoimen lähdekoodin ohjelmisto, lisenssi MIT.
Onko LLM Test Bench -ohjelman lataaminen turvallista?
Tiedosto ladataan osoitteesta github.com, joka kuuluu julkaisijalle; ExeAtlas ei säilytä eikä muuta tiedostoa. Vertaa ladatun tiedoston SHA256-tiivistettä tällä sivulla näkyvään tai avaa tiivisteen VirusTotal-raportti.
Miten LLM Test Bench asennetaan wingetillä?
Avaa PowerShell tai Windows Terminal ja suorita tällä sivulla näkyvä winget-komento. winget lataa virallisen asennusohjelman ja tarkistaa sen SHA256-tiivisteen ennen suorittamista.
Voiko LLM Test Bench -ohjelman asentaa hiljaisesti?
Kyllä. Hiljaisen asennuksen sivulla on tarkka komento jokaiselle asennusohjelmalle, myös msiexec-komento MSI-paketille.
Toimiiko LLM Test Bench ARM-koneissa (Windows on Arm)?
ARM64-versiota ei ole; Windows 11 on Arm voi ajaa saatavilla olevan version (64-bittinen) emuloituna.
Voiko LLM Test Bench -ohjelmaa käyttää ilman järjestelmänvalvojan oikeuksia?
Kyllä, saatavilla on käyttäjäkohtainen asennusohjelma, joka ei tarvitse järjestelmänvalvojan oikeuksia.
Mitä vaihtoehtoja LLM Test Bench -ohjelmalle on?
Codex CLI, Claude Code, ChatGPT by lencx, GPT4All ja Jan. Vaihtoehtosivu vertailee niitä.