Tokenizerのバージョンを、2025年12月29日から最新の1.3.3まで1件掲載しています。いずれも提供元の公式インストーラーにリンクしています。
Tokenizerの旧バージョン・全バージョン一覧
Contains Typescript and C# implementation of byte pair encoding (BPE) tokenizer for OpenAI LLMs, it is based on open sourced rust implementation in the OpenAI tiktoken.
- ライセンスオープンソース
- バージョン1.3.3
- 動作環境Windows 10, 11
- リリース日2025年12月29日
- GitHubスター★ 212
AIアシスタント・LLMで最も人気
すべて表示-
Claude CodeAIアシスタント・LLM · Anthropic PBC -
Codex CLIAIアシスタント・LLM · OpenAI, Inc. -
ChatGPTAIアシスタント・LLM · lencx -
GPT4AllAIアシスタント・LLM · Nomic -
JanAIアシスタント・LLM · Jan -
WSL ManagerAIアシスタント・LLM · Bostrot -
oh-my-piAIアシスタント・LLM · Can Bölük -
T3 CodeAIアシスタント・LLM · T3 Tools -
CC SwitchAIアシスタント・LLM · farion1231 -
LobeHubAIアシスタント・LLM · LobeHub
Microsoft Corporationのほかのソフト
すべて表示
PowerShellターミナル・CLIツール · Microsoft Corporation
PowerToysカスタマイズ · Microsoft Corporation
NuGetパッケージ管理・アップデーター · Microsoft Corporation
Microsoft Azure CLIターミナル・CLIツール · Microsoft Corporation
OpenSSH PreviewFTP・ファイル転送 · Microsoft Corporation
Bicep CLIプログラミング言語・SDK · Microsoft Corporation