A Windows desktop application for evaluating local GGUF models served by llama.cpp. It scans a models folder, starts or attaches to a llama-server on 127.0.0.1:8080, and runs configurable test-case suites covering logic, code, format compliance, instruction following, generation speed and long-context handling. Each answer is graded by an automatic check - substring, regex, JSON schema, code execution, LLM-as-judge or embedding similarity - with skipped checks kept out of the score instead of counted as failures. Runs are stored in a SQLite history with per-case drill-down and side-by-side comparison, and can be exported as an HTML report or printed. Also includes a local agent mode that uses the tested model as a subagent, and reports prefill and generation speed, time to first token, model memory usage and layer placement from the server log.
የአሳታሚው መግለጫ (እንግሊዝኛ)
LLM Test Bench ምንድነው?
LLM Test Bench በaleksandrreva-eng የሚታተም ክፍት ምንጭ የWindows ፕሮግራም ነው፤ “የAI ረዳቶች እና LLM” በሚለው ምድብ ውስጥ ይገኛል።
መጫን እና የሚያስፈልጉ ነገሮች
ለ64-bit ይፋዊ ጫኚዎች በMSI ቅርጸት አሉ። ያለ አስተዳዳሪ መብቶች ለአሁኑ ተጠቃሚ ብቻ ሊጫን ይችላል። ጫኚው ያለ ጥያቄ (ጸጥ ያለ) ጭነትን ይደግፋል። በGroup Policy፣ Intune ወይም Configuration Manager ለማሰማራት የMSI ጥቅል አለ።
ጥቅሞች / ጉዳቶች
ጥቅሞች
- ክፍት ምንጭ፦ ማንኛውም ሰው ኮዱን መመርመር እና መገንባት ይችላል
- ለሚተዳደር ማሰማራት የMSI ጥቅል
- የተገለጸ ጸጥ ያለ ጭነት
- ያለ አስተዳዳሪ መብቶች ይጫናል
- ባለፉት ሁለት ወራት ተዘምኗል
ጉዳቶች
- የራሱ የARM64 ስሪት የለም
በአጭሩ: LLM Test Bench ለ64-bit ኮምፒውተሮች የተሠራ ክፍት ምንጭ የWindows መሣሪያ ነው፤ ምድቡ “የAI ረዳቶች እና LLM” ነው። አስተዳዳሪዎች ያለ ጥያቄ ሊያሰማሩት ይችላሉ።
LLM Test Benchን ማውረድ ደህንነቱ የተጠበቀ ነው?
- ፋይሉ የሚቀርበው ከgithub.com ነው፤ ይህ የአሳታሚው የራሱ ጎራ ነው
- የማውረጃ አገናኙ HTTPS ይጠቀማል
- የSHA256 ሃሽ ታትሟል፤ ስለዚህ ፋይሉን ማረጋገጥ ይችላሉ:
F2727924C77D44CC79431CEDF1B03A5649E0293F2E8F73D94C108B611ADFF0BD· ለዚህ ሃሽ የVirusTotal ሪፖርቱን ይክፈቱ - አገናኙ ገና አልተረጋገጠም
- የምንጭ ኮዱ ለሕዝብ ክፍት ነው
- ExeAtlas ጫኚዎችን አያስተናግድም፣ አይጠቀልልም፣ አይቀይርም
ተዛማጅ መመሪያ: የፋይልን SHA256 ሃሽ በWindows ላይ እንዴት ማረጋገጥ ይቻላል
የቅርብ ጊዜ ስሪቶች
1 ስሪት ›| ስሪት | ቀን | መጠን | ፋይሎች |
|---|---|---|---|
| 1.0.0የቅርብ ጊዜ | 29 ሴፕቴምበር 2026 | — | 64-bit MSI |
ከትዕዛዝ መስመር ይጫኑ
ጸጥ ያለ ጭነት ›winget install --id aleksandrreva-eng.llm-test-bench -emsiexec /i LLMTestBench-1.0.0.msi /qn /norestartmsiexec /x {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E} /qn /norestartተዛማጅ መመሪያ: winget እንዴት እንደሚጠቀሙ፦ ፕሮግራሞችን መጫን እና ማዘመን
መረጃ
- አሳታሚ
- aleksandrreva-eng
- ምድብ
- የAI ረዳቶች እና LLM
- ፈቃድ
- MIT
- ዋጋ
- ነፃ
- የሚያስፈልገው
- Windows 11 / 10
- አርክቴክቸር
- 64-bit
- ጫኚ
- MSI
- ስሪት
- 1.0.0
- የተለቀቀበት
- 29 ሴፕቴምበር 2026
- ወደ ካታሎጉ የተጨመረበት
- 20 ኖቬምበር 2026
- የተዘረዘሩ ስሪቶች
- 1
- በExeAtlas በኩል የወረደው
- 1
- ድረ-ገጽ
- github.com
- የwinget መታወቂያ
- aleksandrreva-eng.llm-test-bench
- የMSI ምርት ኮድ
- {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E}
ደረጃዎች እና ግምገማዎች
እስካሁን ምንም ግምገማ የለም። ደረጃ የሚሰጡ የመጀመሪያው ይሁኑ።
የLLM Test Bench አማራጮች
ሁሉንም ይመልከቱ ›-
ክፍት ምንጭ20.2 ሺ ↓ -
የባለቤትነት73.6 ሺ ↓ -
ክፍት ምንጭ17.1 ሺ ↓ -
ክፍት ምንጭ8.7 ሺ ↓ -
ክፍት ምንጭ3.5 ሺ ↓ -
ክፍት ምንጭ1.8 ሺ ↓ -
ክፍት ምንጭ14.9 ሺ ↓ -
ክፍት ምንጭ950 ↓
ተደጋግመው የሚጠየቁ ጥያቄዎች
LLM Test Bench ነፃ ነው?
አዎ። LLM Test Bench በMIT ፈቃድ የሚሰራጭ የክፍት ምንጭ ሶፍትዌር ነው።
LLM Test Benchን ማውረድ ደህንነቱ የተጠበቀ ነው?
ፋይሉ የሚወርደው ከgithub.com ነው፤ ይህም የአሳታሚው የራሱ አገልጋይ ነው፤ ExeAtlas ፋይሉን አያስተናግድም፣ አይቀይርምም። የSHA256 ሃሹን እዚህ ከሚታየው ጋር ያነጻጽሩ፣ ወይም ለዚያ ሃሽ የVirusTotal ሪፖርቱን ይክፈቱ።
LLM Test Benchን በwinget እንዴት መጫን ይቻላል?
PowerShell ወይም Windows Terminal ይክፈቱ እና በዚህ ገጽ ላይ የሚታየውን የwinget ትዕዛዝ ያስኪዱ። winget ይፋዊውን ጫኚ ያወርዳል፣ ከማስኬዱም በፊት የSHA256 ሃሹን ያረጋግጣል።
LLM Test Bench በጸጥታ ሊጫን ይችላል?
አዎ። የጸጥ ያለ ጭነት ገጹ ለእያንዳንዱ ጫኚ ትክክለኛውን ትዕዛዝ ይዘረዝራል፤ ለMSI ጥቅሉ msiexecንም ጨምሮ።
LLM Test Bench በARM (Windows on Arm) ላይ ይሠራል?
የARM64 ስሪት የለም፤ Windows 11 on Arm የ64-bit ስሪቱን በኢምዩሌሽን ማስኬድ ይችላል።
LLM Test Benchን ያለ አስተዳዳሪ መብቶች መጠቀም ይቻላል?
አዎ፤ የአስተዳዳሪ መብቶችን የማይፈልግ የአንድ ተጠቃሚ ጫኚ አለ።
የLLM Test Bench አማራጮች ምንድን ናቸው?
Codex CLI፣ Claude Code፣ ChatGPT by lencx፣ GPT4All እና Jan። የአማራጮች ገጹ ያነጻጽራቸዋል።