A Windows desktop application for evaluating local GGUF models served by llama.cpp. It scans a models folder, starts or attaches to a llama-server on 127.0.0.1:8080, and runs configurable test-case suites covering logic, code, format compliance, instruction following, generation speed and long-context handling. Each answer is graded by an automatic check - substring, regex, JSON schema, code execution, LLM-as-judge or embedding similarity - with skipped checks kept out of the score instead of counted as failures. Runs are stored in a SQLite history with per-case drill-down and side-by-side comparison, and can be exported as an HTML report or printed. Also includes a local agent mode that uses the tested model as a subagent, and reports prefill and generation speed, time to first token, model memory usage and layer placement from the server log.
Մշակողի նկարագրությունը (անգլերեն)
Ի՞նչ է LLM Test Bench ծրագիրը
LLM Test Bench — բաց կոդով ծրագիր Windows-ի համար «AI օգնականներ և LLM» կատեգորիայից։ Մշակողը՝ aleksandrreva-eng։
Տեղադրում և համակարգային պահանջներ
Պաշտոնական տեղադրիչները հասանելի են 64-բիթ համակարգերի համար․ տեղադրիչի տեսակը՝ MSI։ Այն կարելի է տեղադրել միայն ընթացիկ օգտատիրոջ համար՝ առանց ադմինիստրատորի իրավունքների։ Տեղադրիչն աջակցում է լուռ տեղադրում՝ առանց օգտատիրոջ մասնակցության։ Կա MSI փաթեթ՝ Group Policy-ի, Intune-ի կամ Configuration Manager-ի միջոցով տարածելու համար։
Առավելություններ / Թերություններ
Առավելություններ
- Բաց կոդ․ ցանկացած մեկը կարող է այն ստուգել և ինքնուրույն կառուցել
- MSI փաթեթ՝ կենտրոնացված տարածման համար
- Փաստաթղթավորված լուռ տեղադրում
- Տեղադրվում է առանց ադմինիստրատորի իրավունքների
- Թարմացվել է վերջին երկու ամսում
Թերություններ
- Բնիկ ARM64 կառուցվածք չկա
Հակիրճ: LLM Test Bench — բաց կոդով ծրագիր Windows-ի համար («AI օգնականներ և LLM» կատեգորիա)․ կառուցվածքներ՝ 64-բիթ։ Ադմինիստրատորները կարող են այն տարածել առանց օգտատիրոջ մասնակցության։
Արդյո՞ք անվտանգ է ներբեռնել LLM Test Bench ծրագիրը
- Ֆայլը ներբեռնվում է մշակողի սեփական տիրույթից (github.com)
- Ներբեռնման հղումն օգտագործում է HTTPS
- Հրապարակված է SHA256 հեշ, ուստի ֆայլը կարելի է ստուգել:
F2727924C77D44CC79431CEDF1B03A5649E0293F2E8F73D94C108B611ADFF0BD· Բացել այս հեշի VirusTotal հաշվետվությունը - Հղումը դեռ ստուգված չէ
- Ելակետային կոդը բաց է
- ExeAtlas-ը տեղադրիչներ չի պահում, չի փաթեթավորում և չի փոփոխում
Առնչվող ուղեցույց: Ինչպես ստուգել ֆայլի SHA256 հեշը Windows-ում
Վերջին տարբերակները
Բոլոր 1 տարբերակները ›| Տարբերակ | Ամսաթիվ | Չափ | Ֆայլեր |
|---|---|---|---|
| 1.0.0Վերջինը | 29 սեպտեմբերի, 2026 թ. | — | 64-բիթ MSI |
Տեղադրում հրամանի տողից
Լուռ տեղադրում ›winget install --id aleksandrreva-eng.llm-test-bench -emsiexec /i LLMTestBench-1.0.0.msi /qn /norestartmsiexec /x {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E} /qn /norestartԱռնչվող ուղեցույց: Ինչպես օգտագործել winget-ը՝ տեղադրում և թարմացում
Տեղեկություններ
- Մշակող
- aleksandrreva-eng
- Կատեգորիա
- AI օգնականներ և LLM
- Լիցենզիա
- MIT
- Գին
- Անվճար
- Պահանջներ
- Windows 11 / 10
- Ճարտարապետություն
- 64-բիթ
- Տեղադրիչ
- MSI
- Տարբերակ
- 1.0.0
- Թողարկման ամսաթիվ
- 29 սեպտեմբերի, 2026 թ.
- Ավելացվել է կատալոգ
- 20 նոյեմբերի, 2026 թ.
- Տարբերակ կատալոգում
- 1
- Ներբեռնումներ ExeAtlas-ում
- 1
- Կայք
- github.com
- winget ID
- aleksandrreva-eng.llm-test-bench
- MSI արտադրանքի կոդ
- {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E}
Գնահատականներ և կարծիքներ
Կարծիքներ դեռ չկան։ Կարող եք առաջինը գնահատել։
LLM Test Bench ծրագրի այլընտրանքները
Տեսնել բոլորը ›-
Բաց կոդ20,2 հզր ↓ -
Սեփականատիրական73,6 հզր ↓ -
Բաց կոդ17,1 հզր ↓ -
Բաց կոդ8,7 հզր ↓ -
Բաց կոդ3,5 հզր ↓ -
Բաց կոդ1,8 հզր ↓ -
Բաց կոդ14,9 հզր ↓ -
Բաց կոդ950 ↓
Հաճախ տրվող հարցեր
Արդյո՞ք LLM Test Bench ծրագիրն անվճար է
Այո։ LLM Test Bench ծրագիրը բաց կոդով է (MIT լիցենզիա)․ այն կարելի է անվճար ներբեռնել և օգտագործել։
Արդյո՞ք անվտանգ է ներբեռնել LLM Test Bench ծրագիրը
Ֆայլը ներբեռնվում է github.com սերվերից, որը պատկանում է մշակողին․ ExeAtlas-ը ֆայլը չի պահում և չի փոփոխում։ Համեմատեք ներբեռնված ֆայլի SHA256-ը այս էջում նշվածի հետ կամ բացեք այդ հեշի VirusTotal հաշվետվությունը։
Ինչպե՞ս տեղադրել LLM Test Bench ծրագիրը winget-ով
Բացեք PowerShell-ը կամ Windows Terminal-ը և գործարկեք այս էջում նշված winget հրամանը։ winget-ը կներբեռնի պաշտոնական տեղադրիչը և գործարկելուց առաջ կստուգի դրա SHA256 հեշը։
Հնարավո՞ր է LLM Test Bench ծրագրի լուռ տեղադրում
Այո։ Լուռ տեղադրման էջում նշված է յուրաքանչյուր տեղադրիչի ճշգրիտ հրամանը, այդ թվում՝ msiexec-ը MSI փաթեթի համար։
Աշխատո՞ւմ է LLM Test Bench ծրագիրը ARM-ի վրա (Windows on Arm)
ARM64 կառուցվածք չկա․ Windows 11 on Arm-ը կարող է էմուլյացիայի միջոցով գործարկել 64-բիթ տարբերակը։
Կարելի՞ է LLM Test Bench ծրագիրն օգտագործել առանց ադմինիստրատորի իրավունքների
Այո, կա ընթացիկ օգտատիրոջ համար տեղադրիչ, որին ադմինիստրատորի իրավունքներ պետք չեն։
Ի՞նչ այլընտրանքներ ունի LLM Test Bench ծրագիրը
Codex CLI, Claude Code, ChatGPT by lencx, GPT4All և Jan։ Դրանց համեմատությունը՝ այլընտրանքների էջում։