A Windows desktop application for evaluating local GGUF models served by llama.cpp. It scans a models folder, starts or attaches to a llama-server on 127.0.0.1:8080, and runs configurable test-case suites covering logic, code, format compliance, instruction following, generation speed and long-context handling. Each answer is graded by an automatic check - substring, regex, JSON schema, code execution, LLM-as-judge or embedding similarity - with skipped checks kept out of the score instead of counted as failures. Runs are stored in a SQLite history with per-case drill-down and side-by-side comparison, and can be exported as an HTML report or printed. Also includes a local agent mode that uses the tested model as a subagent, and reports prefill and generation speed, time to first token, model memory usage and layer placement from the server log.
Descrição do desenvolvedor (inglês)
O que é LLM Test Bench?
LLM Test Bench é um programa de código aberto para Windows da categoria Assistentes de IA e LLMs, publicado por aleksandrreva-eng.
Instalação e requisitos
Há instaladores oficiais para 64 bits no formato MSI. Dá para instalar só para o usuário atual, sem permissão de administrador. O instalador aceita instalação automática, sem janelas nem perguntas. Existe um pacote MSI para implantação via Política de Grupo, Intune ou Configuration Manager.
Pontos positivos / Pontos negativos
Pontos positivos
- Código aberto: qualquer pessoa pode revisar e compilar o código
- Pacote MSI para implantação gerenciada
- Instalação silenciosa documentada
- Instala sem permissão de administrador
- Atualizado nos últimos dois meses
Pontos negativos
- Sem versão nativa ARM64
Em resumo: LLM Test Bench é um programa de código aberto da categoria Assistentes de IA e LLMs, disponível para PCs 64 bits. Administradores de TI podem implantá-lo sem interação do usuário.
É seguro baixar LLM Test Bench?
- O arquivo vem de github.com, o domínio do próprio desenvolvedor
- O link de download usa HTTPS
- Há um hash SHA256 publicado para você verificar o arquivo:
F2727924C77D44CC79431CEDF1B03A5649E0293F2E8F73D94C108B611ADFF0BD· Abrir o relatório do VirusTotal para este hash - O link ainda não foi verificado
- O código-fonte é público
- O ExeAtlas não hospeda, encapsula nem modifica instaladores
Guia relacionado: Como verificar o hash SHA256 de um arquivo no Windows
Versões recentes
Todas as 1 versões ›| Versão | Data | Tamanho | Arquivos |
|---|---|---|---|
| 1.0.0Atual | 29 de setembro de 2026 | — | 64 bits MSI |
Instalar pela linha de comando
Instalação silenciosa ›winget install --id aleksandrreva-eng.llm-test-bench -emsiexec /i LLMTestBench-1.0.0.msi /qn /norestartmsiexec /x {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E} /qn /norestartGuia relacionado: Como usar o winget: instalar e atualizar programas
Informações
- Desenvolvedor
- aleksandrreva-eng
- Categoria
- Assistentes de IA e LLMs
- Licença
- MIT
- Preço
- Grátis
- Requisitos
- Windows 11 / 10
- Arquitetura
- 64 bits
- Instalador
- MSI
- Versão
- 1.0.0
- Lançamento
- 29 de setembro de 2026
- Adicionado ao catálogo
- 20 de novembro de 2026
- Versões registradas
- 1
- Downloads pelo ExeAtlas
- 1
- Site oficial
- github.com
- ID do winget
- aleksandrreva-eng.llm-test-bench
- Código de produto MSI
- {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E}
Avaliações
Ainda não há avaliações. Seja o primeiro a dar uma nota.
Alternativas para LLM Test Bench
Ver tudo ›-
Código aberto20,2 mil ↓ -
Proprietário73,6 mil ↓ -
Código aberto17,1 mil ↓ -
Código aberto8,7 mil ↓ -
Código aberto3,5 mil ↓ -
Código aberto1,8 mil ↓ -
Código aberto14,9 mil ↓ -
Código aberto950 ↓
Perguntas frequentes
LLM Test Bench é grátis?
Sim. LLM Test Bench é um software de código aberto com licença MIT.
É seguro baixar LLM Test Bench?
O download vem de github.com, um domínio do próprio desenvolvedor. O ExeAtlas não hospeda nem altera o arquivo. Você pode comparar o hash SHA256 do arquivo com o que aparece aqui ou abrir o relatório do VirusTotal para esse hash.
Como instalar LLM Test Bench pelo winget?
Abra o PowerShell ou o Terminal do Windows e rode o comando winget mostrado nesta página. O winget baixa o instalador oficial e confere o hash SHA256 antes de executá-lo.
Dá para instalar LLM Test Bench em modo silencioso?
Sim. A página de instalação silenciosa traz o comando exato para cada instalador, incluindo o msiexec para o pacote MSI.
LLM Test Bench roda em ARM (Windows on Arm)?
Não há versão ARM64; o Windows 11 on Arm consegue rodar a versão 64 bits por emulação.
Dá para usar LLM Test Bench sem permissão de administrador?
Sim, existe um instalador por usuário que não precisa de permissão de administrador.
Quais são as alternativas para LLM Test Bench?
Codex CLI, Claude Code, ChatGPT by lencx, GPT4All e Jan. A página de alternativas faz a comparação.