Εδώ καταγράφονται 1 έκδοση του Tokenizer, από τις 29 Δεκεμβρίου 2025 έως την τρέχουσα 1.3.3. Κάθε έκδοση οδηγεί στα αρχεία εγκατάστασης του ίδιου του εκδότη.
| Έκδοση | Ημερομηνία | Μέγεθος | Αρχεία |
|---|---|---|---|
| 1.3.3Τελευταία | 29 Δεκεμβρίου 2025 | — | 64-bit ZIP |
Tokenizer: παλαιότερες εκδόσεις και ιστορικό
Contains Typescript and C# implementation of byte pair encoding (BPE) tokenizer for OpenAI LLMs, it is based on open sourced rust implementation in the OpenAI tiktoken.
- ΆδειαΑνοιχτού κώδικα
- Έκδοση1.3.3
- ΑπαιτήσειςWindows 10, 11
- Κυκλοφορία29 Δεκεμβρίου 2025
- Αστέρια GitHub★ 212
Τα πιο δημοφιλή: Βοηθοί AI και LLM
Όλα-
Claude CodeΒοηθοί AI και LLM · Anthropic PBC -
Codex CLIΒοηθοί AI και LLM · OpenAI, Inc. -
ChatGPTΒοηθοί AI και LLM · lencx -
GPT4AllΒοηθοί AI και LLM · Nomic -
JanΒοηθοί AI και LLM · Jan -
WSL ManagerΒοηθοί AI και LLM · Bostrot -
oh-my-piΒοηθοί AI και LLM · Can Bölük -
T3 CodeΒοηθοί AI και LLM · T3 Tools -
CC SwitchΒοηθοί AI και LLM · farion1231 -
LobeHubΒοηθοί AI και LLM · LobeHub
Περισσότερα από τον εκδότη Microsoft Corporation
Όλα
PowerShellΤερματικά και γραμμή εντολών · Microsoft Corporation
PowerToysΠροσαρμογή · Microsoft Corporation
NuGetΔιαχείριση πακέτων και ενημερώσεων · Microsoft Corporation
Microsoft Azure CLIΤερματικά και γραμμή εντολών · Microsoft Corporation
OpenSSH PreviewFTP και μεταφορά αρχείων · Microsoft Corporation
Bicep CLIΓλώσσες και SDK · Microsoft Corporation