A Windows desktop application for evaluating local GGUF models served by llama.cpp. It scans a models folder, starts or attaches to a llama-server on 127.0.0.1:8080, and runs configurable test-case suites covering logic, code, format compliance, instruction following, generation speed and long-context handling. Each answer is graded by an automatic check - substring, regex, JSON schema, code execution, LLM-as-judge or embedding similarity - with skipped checks kept out of the score instead of counted as failures. Runs are stored in a SQLite history with per-case drill-down and side-by-side comparison, and can be exported as an HTML report or printed. Also includes a local agent mode that uses the tested model as a subagent, and reports prefill and generation speed, time to first token, model memory usage and layer placement from the server log.
厂商介绍(英语)
LLM Test Bench是什么软件?
LLM Test Bench是aleksandrreva-eng推出的一款开源的Windows软件,属于「AI助手与大模型」类。
安装与系统要求
官方提供适用于64位系统的安装包,格式为MSI。可以只为当前用户安装,无需管理员权限。安装程序支持无人值守(静默)安装。提供MSI安装包,可通过组策略、Intune或Configuration Manager批量部署。
优点 / 不足
优点
- 开源:任何人都可以查看和编译源代码
- 提供MSI安装包,便于企业部署
- 有文档说明的静默安装参数
- 无需管理员权限即可安装
- 最近两个月内有更新
不足
- 没有原生ARM64版本
总结: LLM Test Bench是一款适用于64位电脑的开源Windows软件,归入「AI助手与大模型」类。IT管理员可以进行无人值守部署。
LLM Test Bench下载安全吗?
- 文件由厂商自己的域名github.com提供
- 下载链接使用HTTPS
- 已公布SHA256值,可校验文件完整性:
F2727924C77D44CC79431CEDF1B03A5649E0293F2E8F73D94C108B611ADFF0BD· 查看该哈希值的VirusTotal报告 - 链接尚未检测
- 源代码公开
- ExeAtlas不托管、不捆绑、不修改安装包
相关教程: Windows下如何校验文件的SHA256哈希值
最近版本
全部1个版本 ›命令行安装
静默安装 ›winget install --id aleksandrreva-eng.llm-test-bench -emsiexec /i LLMTestBench-1.0.0.msi /qn /norestartmsiexec /x {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E} /qn /norestart相关教程: winget使用教程:安装和更新软件
软件信息
- 厂商
- aleksandrreva-eng
- 分类
- AI助手与大模型
- 许可
- MIT
- 价格
- 免费
- 系统要求
- Windows 11 / 10
- 架构
- 64位
- 安装包类型
- MSI
- 版本
- 1.0.0
- 发布日期
- 2026年9月29日
- 收录日期
- 2026年11月20日
- 收录版本数
- 1
- ExeAtlas下载次数
- 1
- 官网
- github.com
- winget ID
- aleksandrreva-eng.llm-test-bench
- MSI产品代码
- {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E}
评分与评价
暂无评价,欢迎第一个评分。
LLM Test Bench替代软件
查看全部 ›-
开源2万 ↓ -
商业软件7.4万 ↓ -
开源1.7万 ↓ -
开源8664 ↓ -
开源3459 ↓ -
开源1814 ↓ -
开源1.5万 ↓ -
开源950 ↓
常见问题
LLM Test Bench是免费的吗?
是的。LLM Test Bench是开源软件,采用MIT许可证。
LLM Test Bench下载安全吗?
安装包来自github.com,该域名属于厂商本身;ExeAtlas不托管也不修改文件。可以将下载文件的SHA256值与本页显示的值比对,或查看该哈希值的VirusTotal报告。
如何用winget安装LLM Test Bench?
打开PowerShell或Windows终端,运行本页提供的winget命令即可。winget会下载官方安装包,并在运行前校验其SHA256值。
LLM Test Bench支持静默安装吗?
支持。静默安装页面列出了每个安装包对应的完整命令,包括MSI安装包的msiexec命令。
LLM Test Bench能在ARM电脑(Windows on Arm)上运行吗?
没有ARM64版本;Windows 11 on Arm可以通过模拟运行64位版本。
没有管理员权限能用LLM Test Bench吗?
可以,官方提供无需管理员权限的单用户安装包。
LLM Test Bench有哪些替代软件?
Codex CLI、Claude Code、ChatGPT by lencx、GPT4All和Jan。替代软件页面对它们做了对比。