A Windows desktop application for evaluating local GGUF models served by llama.cpp. It scans a models folder, starts or attaches to a llama-server on 127.0.0.1:8080, and runs configurable test-case suites covering logic, code, format compliance, instruction following, generation speed and long-context handling. Each answer is graded by an automatic check - substring, regex, JSON schema, code execution, LLM-as-judge or embedding similarity - with skipped checks kept out of the score instead of counted as failures. Runs are stored in a SQLite history with per-case drill-down and side-by-side comparison, and can be exported as an HTML report or printed. Also includes a local agent mode that uses the tested model as a subagent, and reports prefill and generation speed, time to first token, model memory usage and layer placement from the server log.
Deskripsi dari penerbit (Inggris)
Apa itu LLM Test Bench?
LLM Test Bench adalah program Windows open source dalam kategori Asisten AI & LLM dari aleksandrreva-eng.
Instalasi dan persyaratan sistem
Installer resmi tersedia untuk Windows 64-bit dalam format MSI. Program ini bisa diinstal hanya untuk pengguna saat ini, tanpa hak administrator. Installer-nya mendukung instalasi tanpa interaksi (silent install). Tersedia paket MSI untuk distribusi lewat Group Policy, Intune, atau Configuration Manager.
Kelebihan / Kekurangan
Kelebihan
- Open source: kodenya bisa diperiksa dan dikompilasi siapa saja
- Paket MSI untuk deployment terkelola
- Instalasi senyap terdokumentasi
- Bisa diinstal tanpa hak administrator
- Diperbarui dalam dua bulan terakhir
Kekurangan
- Tidak ada versi ARM64 native
Singkatnya: LLM Test Bench adalah aplikasi kategori Asisten AI & LLM yang open source untuk PC 64-bit. Administrator dapat mendistribusikannya tanpa interaksi pengguna.
Apakah LLM Test Bench aman diunduh?
- File disediakan oleh github.com, domain milik penerbit
- Tautan download menggunakan HTTPS
- Hash SHA256 tersedia, sehingga file bisa diverifikasi:
F2727924C77D44CC79431CEDF1B03A5649E0293F2E8F73D94C108B611ADFF0BD· Buka laporan VirusTotal untuk hash ini - Tautan belum dicek
- Kode sumbernya terbuka untuk umum
- ExeAtlas tidak menyimpan, membungkus, atau mengubah installer
Panduan terkait: Cara cek hash SHA256 file di Windows
Rilis terakhir
Semua 1 versi ›| Versi | Tanggal | Ukuran | File |
|---|---|---|---|
| 1.0.0Terbaru | 29 September 2026 | — | 64-bit MSI |
Instalasi lewat command line
Instalasi senyap ›winget install --id aleksandrreva-eng.llm-test-bench -emsiexec /i LLMTestBench-1.0.0.msi /qn /norestartmsiexec /x {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E} /qn /norestartPanduan terkait: Cara pakai winget: instal dan update aplikasi
Informasi
- Penerbit
- aleksandrreva-eng
- Kategori
- Asisten AI & LLM
- Lisensi
- MIT
- Harga
- Gratis
- Persyaratan
- Windows 11 / 10
- Arsitektur
- 64-bit
- Installer
- MSI
- Versi
- 1.0.0
- Tanggal rilis
- 29 September 2026
- Masuk katalog
- 20 November 2026
- Versi tercatat
- 1
- Download di ExeAtlas
- 1
- Situs web
- github.com
- ID winget
- aleksandrreva-eng.llm-test-bench
- Kode produk MSI
- {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E}
Rating dan ulasan
Belum ada ulasan. Jadilah yang pertama memberi rating.
Alternatif LLM Test Bench
Lihat semua ›-
Open source20,2 rb ↓ -
Proprietary73,6 rb ↓ -
Open source17,1 rb ↓ -
Open source8,7 rb ↓ -
Open source3,5 rb ↓ -
Open source1,8 rb ↓ -
Open source14,9 rb ↓ -
Open source950 ↓
Pertanyaan yang sering diajukan
Apakah LLM Test Bench gratis?
Ya. LLM Test Bench adalah software open source berlisensi MIT.
Apakah LLM Test Bench aman diunduh?
File download berasal dari github.com, domain milik penerbit; ExeAtlas tidak menyimpan atau mengubah file tersebut. Cocokkan hash SHA256 file tersebut dengan yang tertera di sini, atau buka laporan VirusTotal untuk hash itu.
Bagaimana cara menginstal LLM Test Bench dengan winget?
Buka PowerShell atau Windows Terminal, lalu jalankan perintah winget yang tertera di halaman ini. winget mengunduh installer resmi dan memeriksa hash SHA256-nya sebelum menjalankannya.
Apakah LLM Test Bench bisa diinstal secara senyap (silent install)?
Ya. Halaman instalasi senyap mencantumkan perintah yang tepat untuk setiap installer, termasuk msiexec untuk paket MSI.
Apakah LLM Test Bench bisa berjalan di prosesor ARM (Windows on Arm)?
Tidak ada versi ARM64; Windows 11 on Arm dapat menjalankan versi 64-bit melalui emulasi.
Apakah LLM Test Bench bisa dipakai tanpa hak administrator?
Ya, tersedia installer per pengguna yang tidak memerlukan hak administrator.
Apa saja alternatif LLM Test Bench?
Codex CLI, Claude Code, ChatGPT by lencx, GPT4All dan Jan. Halaman alternatif membandingkan semuanya.