A Windows desktop application for evaluating local GGUF models served by llama.cpp. It scans a models folder, starts or attaches to a llama-server on 127.0.0.1:8080, and runs configurable test-case suites covering logic, code, format compliance, instruction following, generation speed and long-context handling. Each answer is graded by an automatic check - substring, regex, JSON schema, code execution, LLM-as-judge or embedding similarity - with skipped checks kept out of the score instead of counted as failures. Runs are stored in a SQLite history with per-case drill-down and side-by-side comparison, and can be exported as an HTML report or printed. Also includes a local agent mode that uses the tested model as a subagent, and reports prefill and generation speed, time to first token, model memory usage and layer placement from the server log.
Descripció del desenvolupador (anglès)
Què és LLM Test Bench?
LLM Test Bench és un programa de codi obert per a Windows de la categoria Assistents d’IA i LLM, publicat per aleksandrreva-eng.
Instal·lació i requisits
Hi ha instal·ladors oficials per a 64 bits en format MSI. Es pot instal·lar només per a l’usuari actual, sense permisos d’administrador. L’instal·lador permet una instal·lació desatesa, sense finestres ni preguntes. Hi ha un paquet MSI per desplegar-lo amb directives de grup, Intune o Configuration Manager.
Avantatges / Inconvenients
Avantatges
- Codi obert: qualsevol persona pot revisar i compilar el codi
- Paquet MSI per a desplegaments gestionats
- Instal·lació silenciosa documentada
- S’instal·la sense permisos d’administrador
- Actualitzat en els darrers dos mesos
Inconvenients
- Sense versió nativa per a ARM64
En resum: LLM Test Bench és un programa de codi obert de la categoria Assistents d’IA i LLM, disponible per a ordinadors de 64 bits. Els administradors de sistemes el poden desplegar de manera desatesa.
És segur baixar LLM Test Bench?
- El fitxer se serveix des de github.com, el domini del mateix desenvolupador
- L’enllaç de baixada fa servir HTTPS
- Hi ha un hash SHA256 publicat per verificar el fitxer:
F2727924C77D44CC79431CEDF1B03A5649E0293F2E8F73D94C108B611ADFF0BD· Obre l’informe de VirusTotal d’aquest hash - L’enllaç encara no s’ha comprovat
- El codi font és públic
- ExeAtlas no allotja, no embolcalla ni modifica instal·ladors
Guia relacionada: Com comprovar el hash SHA256 d’un fitxer a Windows
Versions recents
Una sola versió ›| Versió | Data | Mida | Fitxers |
|---|---|---|---|
| 1.0.0Darrera | 29 de setembre del 2026 | — | 64 bits MSI |
Instal·lar des de la línia d’ordres
Instal·lació silenciosa ›winget install --id aleksandrreva-eng.llm-test-bench -emsiexec /i LLMTestBench-1.0.0.msi /qn /norestartmsiexec /x {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E} /qn /norestartGuia relacionada: Com utilitzar winget: instal·lar i actualitzar
Informació
- Desenvolupador
- aleksandrreva-eng
- Categoria
- Assistents d’IA i LLM
- Llicència
- MIT
- Preu
- Gratuït
- Requisits
- Windows 11 / 10
- Arquitectura
- 64 bits
- Instal·lador
- MSI
- Versió
- 1.0.0
- Data de publicació
- 29 de setembre del 2026
- Afegit al catàleg
- 20 de novembre del 2026
- Versions registrades
- 1
- Baixades a ExeAtlas
- 1
- Lloc web
- github.com
- ID de winget
- aleksandrreva-eng.llm-test-bench
- Codi de producte MSI
- {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E}
Valoracions i opinions
Encara no hi ha cap opinió.
Alternatives a LLM Test Bench
Mostra-ho tot ›-
Codi obert20,2 k ↓ -
Propietari73,6 k ↓ -
Codi obert17,1 k ↓ -
Codi obert8,7 k ↓ -
Codi obert3,5 k ↓ -
Codi obert1,8 k ↓ -
Codi obert14,9 k ↓ -
Codi obert950 ↓
Preguntes freqüents
LLM Test Bench és gratuït?
Sí. LLM Test Bench és programari de codi obert amb llicència MIT.
És segur baixar LLM Test Bench?
La baixada prové de github.com, un domini del mateix desenvolupador. ExeAtlas no allotja ni modifica el fitxer. Se’n pot comparar el hash SHA256 amb el que apareix aquí o obrir l’informe de VirusTotal d’aquest hash.
Com s’instal·la LLM Test Bench amb winget?
Només cal obrir PowerShell o el Terminal del Windows i executar l’ordre winget que figura en aquesta pàgina. winget baixa l’instal·lador oficial i en comprova el hash SHA256 abans d’executar-lo.
Es pot instal·lar LLM Test Bench en mode silenciós?
Sí. La pàgina d’instal·lació silenciosa recull l’ordre exacta per a cada instal·lador, inclòs msiexec per al paquet MSI.
LLM Test Bench funciona en ARM (Windows on Arm)?
No hi ha versió per a ARM64; Windows 11 on Arm pot executar la versió de 64 bits per emulació.
Es pot fer servir LLM Test Bench sense permisos d’administrador?
Sí, hi ha un instal·lador per usuari que no necessita permisos d’administrador.
Quines alternatives hi ha a LLM Test Bench?
Codex CLI, Claude Code, ChatGPT by lencx, GPT4All i Jan. La pàgina d’alternatives els compara.