A Windows desktop application for evaluating local GGUF models served by llama.cpp. It scans a models folder, starts or attaches to a llama-server on 127.0.0.1:8080, and runs configurable test-case suites covering logic, code, format compliance, instruction following, generation speed and long-context handling. Each answer is graded by an automatic check - substring, regex, JSON schema, code execution, LLM-as-judge or embedding similarity - with skipped checks kept out of the score instead of counted as failures. Runs are stored in a SQLite history with per-case drill-down and side-by-side comparison, and can be exported as an HTML report or printed. Also includes a local agent mode that uses the tested model as a subagent, and reports prefill and generation speed, time to first token, model memory usage and layer placement from the server log.
Description de l’éditeur (anglais)
LLM Test Bench : présentation
LLM Test Bench est un logiciel open source pour Windows édité par aleksandrreva-eng, classé dans la catégorie « Assistants IA et LLM ».
Installation et configuration requise
Des installateurs officiels existent pour Windows 64 bits, au format MSI. Il peut s’installer pour le seul utilisateur courant, sans droits d’administrateur. L’installateur accepte une installation silencieuse, sans aucune intervention. Un paquet MSI permet le déploiement par stratégie de groupe (GPO), Intune ou Configuration Manager.
Points forts / Points faibles
Points forts
- Open source : chacun peut examiner et compiler le code
- Paquet MSI pour le déploiement en entreprise
- Installation silencieuse documentée
- S’installe sans droits d’administrateur
- Mis à jour au cours des deux derniers mois
Points faibles
- Pas de version ARM64 native
En résumé: LLM Test Bench est un logiciel open source de la catégorie « Assistants IA et LLM », proposé pour les PC 64 bits. Les administrateurs peuvent le déployer sans intervention.
LLM Test Bench : le téléchargement est-il sûr ?
- Le fichier est servi par github.com, le domaine de l’éditeur
- Le lien de téléchargement utilise HTTPS
- Une empreinte SHA256 est publiée : le fichier peut être vérifié:
F2727924C77D44CC79431CEDF1B03A5649E0293F2E8F73D94C108B611ADFF0BD· Ouvrir le rapport VirusTotal de cette empreinte - Le lien n’a pas encore été vérifié
- Le code source est public
- ExeAtlas n’héberge, n’emballe ni ne modifie aucun installateur
Guide associé: Vérifier l’empreinte SHA256 d’un fichier sous Windows
Versions récentes
Toutes les versions (1) ›| Version | Date | Taille | Fichiers |
|---|---|---|---|
| 1.0.0Dernière | 29 septembre 2026 | — | 64 bits MSI |
Installer en ligne de commande
Installation silencieuse ›winget install --id aleksandrreva-eng.llm-test-bench -emsiexec /i LLMTestBench-1.0.0.msi /qn /norestartmsiexec /x {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E} /qn /norestartGuide associé: Utiliser winget : installer et mettre à jour
Informations
- Éditeur
- aleksandrreva-eng
- Catégorie
- Assistants IA et LLM
- Licence
- MIT
- Prix
- Gratuit
- Configuration requise
- Windows 11 / 10
- Architecture
- 64 bits
- Installateur
- MSI
- Version
- 1.0.0
- Date de sortie
- 29 septembre 2026
- Ajouté au catalogue
- 20 novembre 2026
- Versions répertoriées
- 1
- Téléchargements via ExeAtlas
- 1
- Site officiel
- github.com
- Identifiant winget
- aleksandrreva-eng.llm-test-bench
- Code produit MSI
- {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E}
Notes et avis
Aucun avis pour l’instant. Soyez le premier à noter ce logiciel.
Alternatives à LLM Test Bench
Tout voir ›-
Open source20,2 k ↓ -
Propriétaire73,6 k ↓ -
Open source17,1 k ↓ -
Open source8,7 k ↓ -
Open source3,5 k ↓ -
Open source1,8 k ↓ -
Open source14,9 k ↓ -
Open source950 ↓
Questions fréquentes
LLM Test Bench est-il gratuit ?
Oui. LLM Test Bench est un logiciel open source distribué sous licence MIT.
LLM Test Bench : le téléchargement est-il sûr ?
Le fichier est servi par github.com, un domaine qui appartient à l’éditeur ; ExeAtlas n’héberge pas le fichier et ne le modifie pas. Comparez son empreinte SHA256 avec celle affichée ici, ou ouvrez le rapport VirusTotal de cette empreinte.
Comment installer LLM Test Bench avec winget ?
Ouvrez PowerShell ou le Terminal Windows et exécutez la commande winget indiquée sur cette page. winget télécharge l’installateur officiel et vérifie son empreinte SHA256 avant de le lancer.
Peut-on installer LLM Test Bench en mode silencieux ?
Oui. La page consacrée à l’installation silencieuse donne la commande exacte pour chaque installateur, y compris msiexec pour le paquet MSI.
LLM Test Bench fonctionne-t-il sur ARM (Windows on Arm) ?
Il n’existe pas de version ARM64 ; Windows 11 sur Arm peut exécuter la version 64 bits par émulation.
Peut-on utiliser LLM Test Bench sans droits d’administrateur ?
Oui, un installateur par utilisateur fonctionne sans droits d’administrateur.
Quelles sont les alternatives à LLM Test Bench ?
Codex CLI, Claude Code, ChatGPT by lencx, GPT4All et Jan. La page des alternatives les compare.