A Windows desktop application for evaluating local GGUF models served by llama.cpp. It scans a models folder, starts or attaches to a llama-server on 127.0.0.1:8080, and runs configurable test-case suites covering logic, code, format compliance, instruction following, generation speed and long-context handling. Each answer is graded by an automatic check - substring, regex, JSON schema, code execution, LLM-as-judge or embedding similarity - with skipped checks kept out of the score instead of counted as failures. Runs are stored in a SQLite history with per-case drill-down and side-by-side comparison, and can be exported as an HTML report or printed. Also includes a local agent mode that uses the tested model as a subagent, and reports prefill and generation speed, time to first token, model memory usage and layer placement from the server log.
ਪ੍ਰਕਾਸ਼ਕ ਦਾ ਵੇਰਵਾ (ਅੰਗਰੇਜ਼ੀ)
LLM Test Bench ਕੀ ਹੈ?
LLM Test Bench Windows ਲਈ aleksandrreva-eng ਦਾ ਇੱਕ ਓਪਨ ਸੋਰਸ ਪ੍ਰੋਗਰਾਮ ਹੈ, ਜੋ “AI ਅਸਿਸਟੈਂਟ ਅਤੇ LLM” ਸ਼੍ਰੇਣੀ ਵਿੱਚ ਆਉਂਦਾ ਹੈ।
ਇੰਸਟਾਲੇਸ਼ਨ ਅਤੇ ਸਿਸਟਮ ਲੋੜਾਂ
64-ਬਿੱਟ ਲਈ ਅਧਿਕਾਰਤ ਇੰਸਟਾਲਰ ਮੌਜੂਦ ਹਨ (MSI)। ਇਸ ਨੂੰ ਐਡਮਿਨਿਸਟ੍ਰੇਟਰ ਅਧਿਕਾਰਾਂ ਤੋਂ ਬਿਨਾਂ, ਸਿਰਫ਼ ਮੌਜੂਦਾ ਯੂਜ਼ਰ ਲਈ ਇੰਸਟਾਲ ਕੀਤਾ ਜਾ ਸਕਦਾ ਹੈ। ਇੰਸਟਾਲਰ ਬਿਨਾਂ ਕੋਈ ਸਵਾਲ ਪੁੱਛੇ (ਸਾਈਲੈਂਟ) ਇੰਸਟਾਲੇਸ਼ਨ ਸਪੋਰਟ ਕਰਦਾ ਹੈ। Group Policy, Intune ਜਾਂ Configuration Manager ਨਾਲ ਡਿਪਲੌਏ ਕਰਨ ਲਈ MSI ਪੈਕੇਜ ਵੀ ਮੌਜੂਦ ਹੈ।
ਖ਼ੂਬੀਆਂ / ਕਮੀਆਂ
ਖ਼ੂਬੀਆਂ
- ਓਪਨ ਸੋਰਸ: ਕੋਈ ਵੀ ਇਸ ਦਾ ਕੋਡ ਦੇਖ ਅਤੇ ਬਿਲਡ ਕਰ ਸਕਦਾ ਹੈ
- ਮੈਨੇਜਡ ਡਿਪਲੌਇਮੈਂਟ ਲਈ MSI ਪੈਕੇਜ
- ਦਰਜ ਸਾਈਲੈਂਟ ਇੰਸਟਾਲ
- ਐਡਮਿਨਿਸਟ੍ਰੇਟਰ ਅਧਿਕਾਰਾਂ ਤੋਂ ਬਿਨਾਂ ਇੰਸਟਾਲ ਹੁੰਦਾ ਹੈ
- ਪਿਛਲੇ ਦੋ ਮਹੀਨਿਆਂ ਵਿੱਚ ਅੱਪਡੇਟ ਹੋਇਆ
ਕਮੀਆਂ
- ਨੇਟਿਵ ARM64 ਬਿਲਡ ਨਹੀਂ ਹੈ
ਸੰਖੇਪ ਵਿੱਚ: LLM Test Bench 64-ਬਿੱਟ PC ਲਈ ਇੱਕ ਓਪਨ ਸੋਰਸ Windows ਟੂਲ ਹੈ (ਸ਼੍ਰੇਣੀ: AI ਅਸਿਸਟੈਂਟ ਅਤੇ LLM)। ਐਡਮਿਨਿਸਟ੍ਰੇਟਰ ਇਸ ਨੂੰ ਯੂਜ਼ਰ ਦੀ ਦਖ਼ਲਅੰਦਾਜ਼ੀ ਤੋਂ ਬਿਨਾਂ (ਅਣਅਟੈਂਡਡ) ਡਿਪਲੌਏ ਕਰ ਸਕਦੇ ਹਨ।
ਕੀ LLM Test Bench ਡਾਊਨਲੋਡ ਕਰਨਾ ਸੁਰੱਖਿਅਤ ਹੈ?
- ਫ਼ਾਈਲ github.com ਤੋਂ ਆਉਂਦੀ ਹੈ, ਜੋ ਪ੍ਰਕਾਸ਼ਕ ਦਾ ਆਪਣਾ ਡੋਮੇਨ ਹੈ
- ਡਾਊਨਲੋਡ ਲਿੰਕ HTTPS ਵਰਤਦਾ ਹੈ
- SHA256 ਹੈਸ਼ ਪ੍ਰਕਾਸ਼ਿਤ ਹੈ, ਇਸ ਲਈ ਤੁਸੀਂ ਫ਼ਾਈਲ ਦੀ ਜਾਂਚ ਕਰ ਸਕਦੇ ਹੋ:
F2727924C77D44CC79431CEDF1B03A5649E0293F2E8F73D94C108B611ADFF0BD· ਇਸ ਹੈਸ਼ ਦੀ VirusTotal ਰਿਪੋਰਟ ਖੋਲ੍ਹੋ - ਲਿੰਕ ਅਜੇ ਜਾਂਚਿਆ ਨਹੀਂ ਗਿਆ
- ਸੋਰਸ ਕੋਡ ਜਨਤਕ ਹੈ
- ExeAtlas ਇੰਸਟਾਲਰ ਨੂੰ ਨਾ ਹੋਸਟ ਕਰਦਾ ਹੈ, ਨਾ ਰੈਪ ਕਰਦਾ ਹੈ, ਨਾ ਬਦਲਦਾ ਹੈ
ਸੰਬੰਧਿਤ ਗਾਈਡ: Windows ਉੱਤੇ ਫ਼ਾਈਲ ਦਾ SHA256 ਹੈਸ਼ ਕਿਵੇਂ ਚੈੱਕ ਕਰੀਏ
ਹਾਲੀਆ ਵਰਜ਼ਨ
ਸਾਰੇ 1 ਵਰਜ਼ਨ ›| ਵਰਜ਼ਨ | ਤਾਰੀਖ਼ | ਆਕਾਰ | ਫ਼ਾਈਲਾਂ |
|---|---|---|---|
| 1.0.0ਨਵਾਂ ਵਰਜ਼ਨ | 29 ਸਤੰਬਰ 2026 | — | 64-ਬਿੱਟ MSI |
ਕਮਾਂਡ ਲਾਈਨ ਤੋਂ ਇੰਸਟਾਲ ਕਰੋ
ਸਾਈਲੈਂਟ ਇੰਸਟਾਲ ›winget install --id aleksandrreva-eng.llm-test-bench -emsiexec /i LLMTestBench-1.0.0.msi /qn /norestartmsiexec /x {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E} /qn /norestartਸੰਬੰਧਿਤ ਗਾਈਡ: winget ਕਿਵੇਂ ਵਰਤੀਏ: ਐਪਾਂ ਇੰਸਟਾਲ ਅਤੇ ਅੱਪਡੇਟ ਕਰੋ
ਜਾਣਕਾਰੀ
- ਪ੍ਰਕਾਸ਼ਕ
- aleksandrreva-eng
- ਸ਼੍ਰੇਣੀ
- AI ਅਸਿਸਟੈਂਟ ਅਤੇ LLM
- ਲਾਇਸੈਂਸ
- MIT
- ਕੀਮਤ
- ਮੁਫ਼ਤ
- ਲੋੜੀਂਦਾ ਸਿਸਟਮ
- Windows 11 / 10
- ਆਰਕੀਟੈਕਚਰ
- 64-ਬਿੱਟ
- ਇੰਸਟਾਲਰ
- MSI
- ਵਰਜ਼ਨ
- 1.0.0
- ਰਿਲੀਜ਼
- 29 ਸਤੰਬਰ 2026
- ਕੈਟਾਲਾਗ ਵਿੱਚ ਜੋੜੀ ਗਈ
- 20 ਨਵੰਬਰ 2026
- ਦਰਜ ਵਰਜ਼ਨ
- 1
- ExeAtlas ਉੱਤੇ ਡਾਊਨਲੋਡ
- 1
- ਵੈੱਬਸਾਈਟ
- github.com
- winget ID
- aleksandrreva-eng.llm-test-bench
- MSI ਪ੍ਰੋਡਕਟ ਕੋਡ
- {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E}
ਰੇਟਿੰਗ ਅਤੇ ਰਿਵਿਊ
ਅਜੇ ਕੋਈ ਰਿਵਿਊ ਨਹੀਂ ਹੈ। ਸਭ ਤੋਂ ਪਹਿਲਾਂ ਰੇਟਿੰਗ ਦਿਓ।
LLM Test Bench ਦੇ ਬਦਲ
ਸਾਰੀਆਂ ਦੇਖੋ ›-
ਓਪਨ ਸੋਰਸ20.2 ਹਜ਼ਾਰ ↓ -
ਮਲਕੀਅਤੀ (ਪ੍ਰੋਪਰਾਇਟਰੀ)73.6 ਹਜ਼ਾਰ ↓ -
ਓਪਨ ਸੋਰਸ17.1 ਹਜ਼ਾਰ ↓ -
ਓਪਨ ਸੋਰਸ8.7 ਹਜ਼ਾਰ ↓ -
ਓਪਨ ਸੋਰਸ3.5 ਹਜ਼ਾਰ ↓ -
ਓਪਨ ਸੋਰਸ1.8 ਹਜ਼ਾਰ ↓ -
ਓਪਨ ਸੋਰਸ14.9 ਹਜ਼ਾਰ ↓ -
ਓਪਨ ਸੋਰਸ950 ↓
ਅਕਸਰ ਪੁੱਛੇ ਜਾਣ ਵਾਲੇ ਸਵਾਲ
ਕੀ LLM Test Bench ਮੁਫ਼ਤ ਹੈ?
ਹਾਂ। LLM Test Bench ਓਪਨ ਸੋਰਸ ਸਾਫ਼ਟਵੇਅਰ ਹੈ (MIT ਲਾਇਸੈਂਸ)।
ਕੀ LLM Test Bench ਡਾਊਨਲੋਡ ਕਰਨਾ ਸੁਰੱਖਿਅਤ ਹੈ?
ਫ਼ਾਈਲ github.com ਤੋਂ ਡਾਊਨਲੋਡ ਹੁੰਦੀ ਹੈ, ਜੋ ਪ੍ਰਕਾਸ਼ਕ ਦਾ ਆਪਣਾ ਹੈ; ExeAtlas ਫ਼ਾਈਲ ਨੂੰ ਨਾ ਹੋਸਟ ਕਰਦਾ ਹੈ, ਨਾ ਬਦਲਦਾ ਹੈ। ਡਾਊਨਲੋਡ ਕੀਤੀ ਫ਼ਾਈਲ ਦਾ SHA256 ਹੈਸ਼ ਇੱਥੇ ਦਿਖਾਏ ਹੈਸ਼ ਨਾਲ ਮਿਲਾਓ, ਜਾਂ ਉਸ ਹੈਸ਼ ਦੀ VirusTotal ਰਿਪੋਰਟ ਖੋਲ੍ਹੋ।
winget ਨਾਲ LLM Test Bench ਕਿਵੇਂ ਇੰਸਟਾਲ ਕਰੀਏ?
PowerShell ਜਾਂ Windows Terminal ਖੋਲ੍ਹੋ ਅਤੇ ਇਸ ਪੰਨੇ ਉੱਤੇ ਦਿੱਤੀ winget ਕਮਾਂਡ ਚਲਾਓ। winget ਅਧਿਕਾਰਤ ਇੰਸਟਾਲਰ ਡਾਊਨਲੋਡ ਕਰਦਾ ਹੈ ਅਤੇ ਚਲਾਉਣ ਤੋਂ ਪਹਿਲਾਂ ਉਸ ਦਾ SHA256 ਹੈਸ਼ ਜਾਂਚਦਾ ਹੈ।
ਕੀ LLM Test Bench ਨੂੰ ਸਾਈਲੈਂਟ ਇੰਸਟਾਲ ਕੀਤਾ ਜਾ ਸਕਦਾ ਹੈ?
ਹਾਂ। ਸਾਈਲੈਂਟ ਇੰਸਟਾਲ ਪੰਨੇ ਉੱਤੇ ਹਰ ਇੰਸਟਾਲਰ ਦੀ ਸਹੀ ਕਮਾਂਡ ਦਿੱਤੀ ਗਈ ਹੈ, MSI ਪੈਕੇਜ ਲਈ msiexec ਕਮਾਂਡ ਵੀ।
ਕੀ LLM Test Bench ARM (Windows on Arm) ਉੱਤੇ ਚੱਲਦਾ ਹੈ?
ARM64 ਬਿਲਡ ਨਹੀਂ ਹੈ; Windows 11 on Arm ਉੱਤੇ 64-ਬਿੱਟ ਵਰਜ਼ਨ ਇਮੂਲੇਸ਼ਨ ਰਾਹੀਂ ਚੱਲ ਸਕਦਾ ਹੈ।
ਕੀ LLM Test Bench ਨੂੰ ਐਡਮਿਨਿਸਟ੍ਰੇਟਰ ਅਧਿਕਾਰਾਂ ਤੋਂ ਬਿਨਾਂ ਵਰਤਿਆ ਜਾ ਸਕਦਾ ਹੈ?
ਹਾਂ, ਇਸ ਦਾ ਇੱਕ ਪ੍ਰਤੀ-ਯੂਜ਼ਰ ਇੰਸਟਾਲਰ ਹੈ, ਜਿਸ ਲਈ ਐਡਮਿਨਿਸਟ੍ਰੇਟਰ ਅਧਿਕਾਰ ਜ਼ਰੂਰੀ ਨਹੀਂ।
LLM Test Bench ਦੇ ਬਦਲ ਕਿਹੜੇ ਹਨ?
Codex CLI, Claude Code, ChatGPT by lencx, GPT4All ਅਤੇ Jan। ਬਦਲਾਂ ਵਾਲੇ ਪੰਨੇ ਉੱਤੇ ਇਹਨਾਂ ਦੀ ਤੁਲਨਾ ਦਿੱਤੀ ਗਈ ਹੈ।