A Windows desktop application for evaluating local GGUF models served by llama.cpp. It scans a models folder, starts or attaches to a llama-server on 127.0.0.1:8080, and runs configurable test-case suites covering logic, code, format compliance, instruction following, generation speed and long-context handling. Each answer is graded by an automatic check - substring, regex, JSON schema, code execution, LLM-as-judge or embedding similarity - with skipped checks kept out of the score instead of counted as failures. Runs are stored in a SQLite history with per-case drill-down and side-by-side comparison, and can be exported as an HTML report or printed. Also includes a local agent mode that uses the tested model as a subagent, and reports prefill and generation speed, time to first token, model memory usage and layer placement from the server log.
Nashr etuvchining tavsifi (inglizcha)
LLM Test Bench nima?
LLM Test Bench — aleksandrreva-eng tomonidan chiqarilgan ochiq kodli Windows dasturi («SI yordamchilari va LLM» kategoriyasi).
Oʻrnatish va tizim talablari
Rasmiy oʻrnatish fayllari 64 bitli Windows uchun MSI formatida taqdim etiladi. Administrator huquqlarisiz faqat joriy foydalanuvchi uchun oʻrnatish mumkin. Oʻrnatuvchi savolsiz (jim) oʻrnatishni qoʻllab-quvvatlaydi. Group Policy, Intune yoki Configuration Manager orqali tarqatish uchun MSI paketi mavjud.
Afzalliklari / Kamchiliklari
Afzalliklari
- Ochiq kodli: kodni istalgan kishi koʻrib chiqishi va yigʻishi mumkin
- Korporativ tarqatish uchun MSI paketi
- Hujjatlashtirilgan jim oʻrnatish
- Administrator huquqlarisiz oʻrnatiladi
- Soʻnggi ikki oyda yangilangan
Kamchiliklari
- Mahalliy ARM64 versiyasi yoʻq
Qisqacha xulosa: LLM Test Bench — 64 bitli kompyuterlar uchun ochiq kodli Windows vositasi («SI yordamchilari va LLM» kategoriyasi). Administratorlar uni savolsiz (avtomatik) tarqatishi mumkin.
LLM Test Bench dasturini yuklab olish xavfsizmi?
- Fayl nashr etuvchining oʻz domeni — github.com orqali beriladi
- Yuklab olish havolasi HTTPS protokolidan foydalanadi
- SHA256 xeshi eʼlon qilingan, shuning uchun faylni tekshirish mumkin:
F2727924C77D44CC79431CEDF1B03A5649E0293F2E8F73D94C108B611ADFF0BD· Bu xesh uchun VirusTotal hisobotini ochish - Havola hali tekshirilmagan
- Manba kodi ochiq
- ExeAtlas oʻrnatish fayllarini saqlamaydi, oʻramaydi va oʻzgartirmaydi
Tegishli qoʻllanma: Windowsda fayl SHA256 xeshini tekshirish
Soʻnggi versiyalar
Barcha 1 ta versiya ›| Versiya | Sana | Hajmi | Fayllar |
|---|---|---|---|
| 1.0.0Eng soʻnggi | 29-sentabr, 2026 | — | 64 bitli MSI |
Buyruq satridan oʻrnatish
Jim oʻrnatish ›winget install --id aleksandrreva-eng.llm-test-bench -emsiexec /i LLMTestBench-1.0.0.msi /qn /norestartmsiexec /x {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E} /qn /norestartTegishli qoʻllanma: winget: dasturlarni oʻrnatish va yangilash
Maʼlumot
- Nashr etuvchi
- aleksandrreva-eng
- Kategoriya
- SI yordamchilari va LLM
- Litsenziya
- MIT
- Narxi
- Bepul
- Talablar
- Windows 11 / 10
- Arxitektura
- 64 bitli
- Oʻrnatuvchi turi
- MSI
- Versiya
- 1.0.0
- Chiqarilgan sana
- 29-sentabr, 2026
- Katalogga qoʻshilgan
- 20-noyabr, 2026
- Roʻyxatdagi versiyalar
- 1
- ExeAtlas orqali yuklab olishlar
- 1
- Veb-sayt
- github.com
- winget ID
- aleksandrreva-eng.llm-test-bench
- MSI mahsulot kodi
- {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E}
Baholar va sharhlar
Hali sharhlar yoʻq. Birinchi boʻlib baholang.
LLM Test Bench dasturiga muqobillar
Barchasini koʻrish ›-
Ochiq kodli20,2 ming ↓ -
Xususiy (yopiq kodli)73,6 ming ↓ -
Ochiq kodli17,1 ming ↓ -
Ochiq kodli8,7 ming ↓ -
Ochiq kodli3,5 ming ↓ -
Ochiq kodli1,8 ming ↓ -
Ochiq kodli14,9 ming ↓ -
Ochiq kodli950 ↓
Koʻp beriladigan savollar
LLM Test Bench bepulmi?
Ha. LLM Test Bench — ochiq kodli dastur (MIT litsenziyasi).
LLM Test Bench dasturini yuklab olish xavfsizmi?
Fayl github.com manzilidan yuklab olinadi; bu manzil nashr etuvchiga tegishli. ExeAtlas faylni saqlamaydi va oʻzgartirmaydi. Yuklab olingan faylning SHA256 xeshini shu yerda koʻrsatilgani bilan solishtiring yoki bu xesh uchun VirusTotal hisobotini oching.
LLM Test Bench dasturini winget orqali qanday oʻrnatish mumkin?
PowerShell yoki Windows Terminalni oching va shu sahifadagi winget buyrugʻini ishga tushiring. winget rasmiy oʻrnatish faylini yuklab oladi va ishga tushirishdan oldin uning SHA256 xeshini tekshiradi.
LLM Test Bench dasturini jim oʻrnatish mumkinmi?
Ha. Jim oʻrnatish sahifasida har bir oʻrnatuvchi uchun aniq buyruq berilgan, jumladan MSI paketi uchun msiexec buyrugʻi.
LLM Test Bench ARM protsessorida (Windows on Arm) ishlaydimi?
ARM64 versiyasi yoʻq; Windows 11 on Arm 64 bitli versiyasini emulyatsiya orqali ishga tushira oladi.
LLM Test Bench dasturidan administrator huquqlarisiz foydalanish mumkinmi?
Ha, administrator huquqlarini talab qilmaydigan, faqat joriy foydalanuvchi uchun oʻrnatuvchi mavjud.
LLM Test Bench dasturiga qanday muqobillar bor?
Codex CLI, Claude Code, ChatGPT by lencx, GPT4All va Jan. Muqobillar sahifasi ularni taqqoslaydi.