A Windows desktop application for evaluating local GGUF models served by llama.cpp. It scans a models folder, starts or attaches to a llama-server on 127.0.0.1:8080, and runs configurable test-case suites covering logic, code, format compliance, instruction following, generation speed and long-context handling. Each answer is graded by an automatic check - substring, regex, JSON schema, code execution, LLM-as-judge or embedding similarity - with skipped checks kept out of the score instead of counted as failures. Runs are stored in a SQLite history with per-case drill-down and side-by-side comparison, and can be exported as an HTML report or printed. Also includes a local agent mode that uses the tested model as a subagent, and reports prefill and generation speed, time to first token, model memory usage and layer placement from the server log.
提供元による説明(英語)
LLM Test Benchとは
LLM Test Benchは、aleksandrreva-engが公開しているオープンソースのWindows向けソフトです(カテゴリ:AIアシスタント・LLM)。
インストールと動作環境
公式インストーラーは64ビット向けにMSI形式で用意されています。管理者権限がなくても、現在のユーザーだけにインストールできます。インストーラーは無人(サイレント)インストールに対応しています。グループポリシー、Intune、Configuration Managerで配布できるMSIパッケージがあります。
メリット / デメリット
メリット
- オープンソースで、誰でもコードを確認・ビルドできる
- 組織での一括配布に使えるMSIパッケージがある
- サイレントインストールの方法が公開されている
- 管理者権限なしでインストールできる
- 直近2か月以内に更新されている
デメリット
- ネイティブのARM64版がない
まとめ: LLM Test Benchは、「AIアシスタント・LLM」に分類されるオープンソースのWindowsソフトです。64ビットのPCで使えます。管理者は無人インストールで一括配布できます。
LLM Test Benchのダウンロードは安全ですか?
- ファイルは提供元のドメイン(github.com)から配信されています
- ダウンロードリンクはHTTPSを使用しています
- SHA256ハッシュが公開されているため、ファイルを検証できます:
F2727924C77D44CC79431CEDF1B03A5649E0293F2E8F73D94C108B611ADFF0BD· このハッシュのVirusTotalレポートを開く - リンクはまだ確認されていません
- ソースコードは公開されています
- ExeAtlasはインストーラーのホスト、ラップ、改変を行っていません
関連ガイド: SHA256ハッシュの確認方法(Windows)
最近のバージョン
全1バージョン ›コマンドラインでインストール
サイレントインストール ›winget install --id aleksandrreva-eng.llm-test-bench -emsiexec /i LLMTestBench-1.0.0.msi /qn /norestartmsiexec /x {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E} /qn /norestart関連ガイド: wingetの使い方:アプリのインストールと更新
情報
- 提供元
- aleksandrreva-eng
- カテゴリ
- AIアシスタント・LLM
- ライセンス
- MIT
- 価格
- 無料
- 動作環境
- Windows 11 / 10
- アーキテクチャ
- 64ビット
- インストーラー
- MSI
- バージョン
- 1.0.0
- リリース日
- 2026年9月29日
- カタログ追加日
- 2026年11月20日
- 掲載バージョン数
- 1
- ExeAtlasでのダウンロード数
- 1
- 公式サイト
- github.com
- winget ID
- aleksandrreva-eng.llm-test-bench
- MSIプロダクトコード
- {C6400931-BC80-4D9D-9CC4-8EF5DD6D331E}
評価とレビュー
まだレビューはありません。最初の評価を投稿してください。
LLM Test Benchの代替ソフト
すべて表示 ›-
オープンソース2万 ↓ -
プロプライエタリ7.4万 ↓ -
オープンソース1.7万 ↓ -
オープンソース8664 ↓ -
オープンソース3459 ↓ -
オープンソース1814 ↓ -
オープンソース1.5万 ↓ -
オープンソース950 ↓
よくある質問
LLM Test Benchは無料ですか?
はい。LLM Test Benchはオープンソースのソフトです(MITライセンス)。
LLM Test Benchのダウンロードは安全ですか?
ファイルはgithub.comから配信されます。github.comは提供元のドメインです。ExeAtlasはファイルをホストしておらず、改変もしていません。ダウンロードしたファイルのSHA256をこのページに記載の値と照合するか、そのハッシュのVirusTotalレポートを確認してください。
LLM Test Benchをwingetでインストールするには?
PowerShellかWindowsターミナルを開き、このページに記載のwingetコマンドを実行します。wingetは公式インストーラーをダウンロードし、実行前にSHA256ハッシュを検証します。
LLM Test Benchはサイレントインストールできますか?
はい。サイレントインストールのページに、インストーラーごとのコマンドを掲載しています(MSIパッケージ用のmsiexecコマンドを含む)。
LLM Test BenchはARM版Windows(Windows on Arm)で動きますか?
ARM64版はありません。Windows 11 on Armでは、エミュレーションによって64ビット版を実行できます。
LLM Test Benchは管理者権限なしで使えますか?
はい。管理者権限のいらないユーザー単位のインストーラーがあります。
LLM Test Benchの代わりになるソフトは?
Codex CLI、Claude Code、ChatGPT by lencx、GPT4All、Janなどがあります。代替ソフトのページで比較できます。