A Windows desktop application for evaluating local GGUF models served by llama.cpp. It scans a models folder, starts or attaches to a llama-server on 127.0.0.1:8080, and runs configurable test-case suites covering logic, code, format compliance, instruction following, generation speed and long-context handling. Each answer is graded by an automatic check - substring, regex, JSON schema, code execution, LLM-as-judge or embedding similarity - with skipped checks kept out of the score instead of counted as failures. Runs are stored in a SQLite history with per-case drill-down and side-by-side comparison, and can be exported as an HTML report or printed. Also includes a local agent mode that uses the tested model as a subagent, and reports prefill and generation speed, time to first token, model memory usage and layer placement from the server log.
प्रकाशक का विवरण (अंग्रेज़ी)
LLM Test Bench क्या है?
LLM Test Bench Windows के लिए aleksandrreva-eng का एक ओपन सोर्स प्रोग्राम है, जो “AI असिस्टेंट और LLM” श्रेणी में आता है।
इंस्टॉलेशन और सिस्टम आवश्यकताएँ
64-बिट के लिए आधिकारिक इंस्टॉलर उपलब्ध हैं (MSI)। इसे एडमिनिस्ट्रेटर अधिकारों के बिना, सिर्फ़ मौजूदा यूज़र के लिए इंस्टॉल किया जा सकता है। इंस्टॉलर बिना किसी सवाल-जवाब के (साइलेंट) इंस्टॉलेशन सपोर्ट करता है। Group Policy, Intune या Configuration Manager से डिप्लॉय करने के लिए MSI पैकेज भी उपलब्ध है।
खूबियाँ / कमियाँ
खूबियाँ
- ओपन सोर्स: कोई भी इसका कोड देख और बिल्ड कर सकता है
- मैनेज्ड डिप्लॉयमेंट के लिए MSI पैकेज
- डॉक्यूमेंटेड साइलेंट इंस्टॉल
- एडमिनिस्ट्रेटर अधिकारों के बिना इंस्टॉल होता है
- पिछले दो महीनों में अपडेट हुआ
कमियाँ
- नेटिव ARM64 बिल्ड नहीं है
संक्षेप में: LLM Test Bench 64-बिट PC के लिए एक ओपन सोर्स Windows टूल है (श्रेणी: AI असिस्टेंट और LLM)। एडमिनिस्ट्रेटर इसे बिना किसी यूज़र इनपुट के (अनअटेंडेड) डिप्लॉय कर सकते हैं।
क्या LLM Test Bench डाउनलोड करना सुरक्षित है?
- फ़ाइल github.com से आती है, जो प्रकाशक का अपना डोमेन है
- डाउनलोड लिंक HTTPS का इस्तेमाल करता है
- SHA256 हैश प्रकाशित है, इसलिए आप फ़ाइल की जाँच कर सकते हैं:
F2727924C77D44CC79431CEDF1B03A5649E0293F2E8F73D94C108B611ADFF0BD· इस हैश की VirusTotal रिपोर्ट खोलें - लिंक अभी जाँचा नहीं गया है
- सोर्स कोड सार्वजनिक है
- ExeAtlas इंस्टॉलर को न होस्ट करता है, न रैप करता है, न बदलता है
संबंधित गाइड: Windows पर फ़ाइल का SHA256 हैश कैसे चेक करें
हाल के संस्करण
सभी 1 संस्करण ›| संस्करण | तारीख़ | साइज़ | फ़ाइलें |
|---|---|---|---|
| 1.0.0नवीनतम | 29 सितंबर 2026 | — | 64-बिट MSI |
कमांड लाइन से इंस्टॉल करें
साइलेंट इंस्टॉल ›winget install --id aleksandrreva-eng.llm-test-bench -emsiexec /i LLMTestBench-1.0.0.msi /qn /norestartmsiexec /x {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E} /qn /norestartसंबंधित गाइड: winget कैसे इस्तेमाल करें: ऐप इंस्टॉल और अपडेट
जानकारी
- प्रकाशक
- aleksandrreva-eng
- श्रेणी
- AI असिस्टेंट और LLM
- लाइसेंस
- MIT
- कीमत
- मुफ़्त
- ज़रूरी सिस्टम
- Windows 11 / 10
- आर्किटेक्चर
- 64-बिट
- इंस्टॉलर
- MSI
- संस्करण
- 1.0.0
- रिलीज़
- 29 सितंबर 2026
- कैटलॉग में जोड़ा गया
- 20 नवंबर 2026
- सूचीबद्ध संस्करण
- 1
- ExeAtlas पर डाउनलोड
- 1
- वेबसाइट
- github.com
- winget ID
- aleksandrreva-eng.llm-test-bench
- MSI प्रोडक्ट कोड
- {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E}
रेटिंग और रिव्यू
अभी कोई रिव्यू नहीं है। सबसे पहले रेटिंग दें।
LLM Test Bench के विकल्प
सभी देखें ›-
ओपन सोर्स20.2 हज़ार ↓ -
प्रोप्राइटरी73.6 हज़ार ↓ -
ओपन सोर्स17.1 हज़ार ↓ -
ओपन सोर्स8.7 हज़ार ↓ -
ओपन सोर्स3.5 हज़ार ↓ -
ओपन सोर्स1.8 हज़ार ↓ -
ओपन सोर्स14.9 हज़ार ↓ -
ओपन सोर्स950 ↓
अक्सर पूछे जाने वाले सवाल
क्या LLM Test Bench मुफ़्त है?
हाँ। LLM Test Bench ओपन सोर्स सॉफ़्टवेयर है (MIT लाइसेंस)।
क्या LLM Test Bench डाउनलोड करना सुरक्षित है?
फ़ाइल github.com से डाउनलोड होती है, जो प्रकाशक का अपना है; ExeAtlas फ़ाइल को न होस्ट करता है, न बदलता है। डाउनलोड की गई फ़ाइल का SHA256 हैश यहाँ दिखाए गए हैश से मिलाएँ, या उस हैश की VirusTotal रिपोर्ट खोलें।
winget से LLM Test Bench कैसे इंस्टॉल करें?
PowerShell या Windows Terminal खोलें और इस पेज पर दिया गया winget कमांड चलाएँ। winget आधिकारिक इंस्टॉलर डाउनलोड करता है और चलाने से पहले उसका SHA256 हैश जाँचता है।
क्या LLM Test Bench को साइलेंट इंस्टॉल किया जा सकता है?
हाँ। साइलेंट इंस्टॉल पेज पर हर इंस्टॉलर का सटीक कमांड दिया गया है, MSI पैकेज के लिए msiexec कमांड भी।
क्या LLM Test Bench ARM (Windows on Arm) पर चलता है?
ARM64 बिल्ड नहीं है; Windows 11 on Arm पर 64-बिट वर्ज़न एमुलेशन के ज़रिए चल सकता है।
क्या LLM Test Bench को एडमिनिस्ट्रेटर अधिकारों के बिना इस्तेमाल किया जा सकता है?
हाँ, इसका एक पर-यूज़र इंस्टॉलर है, जिसके लिए एडमिनिस्ट्रेटर अधिकार ज़रूरी नहीं।
LLM Test Bench के विकल्प कौन-से हैं?
Codex CLI, Claude Code, ChatGPT by lencx, GPT4All और Jan। विकल्प पेज पर इनकी तुलना दी गई है।