A Windows desktop application for evaluating local GGUF models served by llama.cpp. It scans a models folder, starts or attaches to a llama-server on 127.0.0.1:8080, and runs configurable test-case suites covering logic, code, format compliance, instruction following, generation speed and long-context handling. Each answer is graded by an automatic check - substring, regex, JSON schema, code execution, LLM-as-judge or embedding similarity - with skipped checks kept out of the score instead of counted as failures. Runs are stored in a SQLite history with per-case drill-down and side-by-side comparison, and can be exported as an HTML report or printed. Also includes a local agent mode that uses the tested model as a subagent, and reports prefill and generation speed, time to first token, model memory usage and layer placement from the server log.
Описание от разработчика (английски)
Какво е LLM Test Bench?
LLM Test Bench е програма за Windows с отворен код от категория „AI асистенти и LLM“. Разработчик: aleksandrreva-eng.
Инсталиране и системни изисквания
Официалните инсталатори са за 64-битова; тип на инсталатора: MSI. Може да се инсталира само за текущия потребител, без администраторски права. Инсталаторът поддържа инсталиране без въпроси (тиха инсталация). Наличен е MSI пакет за разгръщане чрез групови правила, Intune или Configuration Manager.
Предимства / Недостатъци
Предимства
- Отворен код: всеки може да го прегледа и компилира
- MSI пакет за централизирано разгръщане
- Документирана тиха инсталация
- Инсталиране без администраторски права
- Обновена през последните два месеца
Недостатъци
- Няма собствена компилация ARM64
Накратко: LLM Test Bench е програма за Windows с отворен код (категория „AI асистенти и LLM“); компилации: 64-битова. Администраторите могат да я разгръщат без намеса на потребителя.
Безопасно ли е изтеглянето на LLM Test Bench?
- Файлът се изтегля от домейна на разработчика (github.com)
- Връзката за изтегляне използва HTTPS
- Публикуван е хеш SHA256 – файлът може да се провери:
F2727924C77D44CC79431CEDF1B03A5649E0293F2E8F73D94C108B611ADFF0BD· Отворете доклада на VirusTotal за този хеш - Връзката още не е проверена
- Изходният код е публичен
- ExeAtlas не съхранява, не обвива и не променя инсталатори
Свързано ръководство: Как да проверите SHA256 хеша на файл в Windows
Последни версии
Всички версии (1) ›| Версия | Дата | Размер | Файлове |
|---|---|---|---|
| 1.0.0Последна | 29 септември 2026 г. | — | 64-битова MSI |
Инсталиране от командния ред
Тиха инсталация ›winget install --id aleksandrreva-eng.llm-test-bench -emsiexec /i LLMTestBench-1.0.0.msi /qn /norestartmsiexec /x {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E} /qn /norestartСвързано ръководство: Как се използва winget: инсталиране и обновяване
Информация
- Разработчик
- aleksandrreva-eng
- Категория
- AI асистенти и LLM
- Лиценз
- MIT
- Цена
- Безплатно
- Изисквания
- Windows 11 / 10
- Архитектура
- 64-битова
- Инсталатор
- MSI
- Версия
- 1.0.0
- Дата на издаване
- 29 септември 2026 г.
- Добавена в каталога
- 20 ноември 2026 г.
- Версии в каталога
- 1
- Изтегляния през ExeAtlas
- 1
- Уебсайт
- github.com
- ID в winget
- aleksandrreva-eng.llm-test-bench
- Код на продукта MSI
- {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E}
Оценки и отзиви
Все още няма отзиви. Можете да дадете първата оценка.
Алтернативи на LLM Test Bench
Виж всички ›-
Отворен код20,2 хил. ↓ -
Собственически лиценз73,6 хил. ↓ -
Отворен код17,1 хил. ↓ -
Отворен код8,7 хил. ↓ -
Отворен код3,5 хил. ↓ -
Отворен код1,8 хил. ↓ -
Отворен код14,9 хил. ↓ -
Отворен код950 ↓
Често задавани въпроси
Безплатна ли е програмата LLM Test Bench?
Да. LLM Test Bench е програма с отворен код (лиценз MIT); изтеглянето и използването са безплатни.
Безопасно ли е изтеглянето на LLM Test Bench?
Файлът се изтегля от github.com – домейн на разработчика; ExeAtlas не съхранява и не променя файла. Сравнете SHA256 на изтегления файл със стойността на тази страница или отворете доклада на VirusTotal за този хеш.
Как да инсталирам LLM Test Bench с winget?
Отворете PowerShell или Windows Terminal и изпълнете командата за winget от тази страница. winget изтегля официалния инсталатор и преди стартиране проверява хеша му SHA256.
Може ли LLM Test Bench да се инсталира в тих режим?
Да. Страницата за тиха инсталация дава точната команда за всеки инсталатор, включително msiexec за MSI пакета.
Работи ли LLM Test Bench на ARM (Windows on Arm)?
Компилация за ARM64 няма; Windows 11 on Arm може да стартира версията за 64-битова чрез емулация.
Може ли LLM Test Bench да се използва без администраторски права?
Да, има инсталатор за текущия потребител, който не изисква администраторски права.
Какви са алтернативите на LLM Test Bench?
Codex CLI, Claude Code, ChatGPT by lencx, GPT4All и Jan. Сравнение има на страницата с алтернативи.