ఇక్కడ Tokenizer 1 వెర్షన్లు ఉన్నాయి, 29 డిసెంబర్, 2025 నుంచి ప్రస్తుత 1.3.3 వరకు. ప్రతి వెర్షన్ లింక్ ప్రచురణకర్త సొంత ఇన్‌స్టాలర్ ఫైల్‌లకే వెళ్తుంది.
| వెర్షన్ | తేదీ | సైజ్ | ఫైల్‌లు |
|---|---|---|---|
| 1.3.3తాజా | 29 డిసెంబర్, 2025 | — | 64-బిట్ ZIP |
Tokenizer పాత వెర్షన్లు డౌన్‌లోడ్
Contains Typescript and C# implementation of byte pair encoding (BPE) tokenizer for OpenAI LLMs, it is based on open sourced rust implementation in the OpenAI tiktoken.
- లైసెన్స్ఓపెన్ సోర్స్
- వెర్షన్1.3.3
- అవసరమైన సిస్టమ్Windows 10, 11
- విడుదల29 డిసెంబర్, 2025
- GitHub స్టార్‌లు★ 212
AI అసిస్టెంట్లు మరియు LLMలో ఎక్కువ జనాదరణ
అన్నీ చూడండి-
Claude CodeAI అసిస్టెంట్లు మరియు LLM · Anthropic PBC -
Codex CLIAI అసిస్టెంట్లు మరియు LLM · OpenAI, Inc. -
ChatGPTAI అసిస్టెంట్లు మరియు LLM · lencx -
GPT4AllAI అసిస్టెంట్లు మరియు LLM · Nomic -
JanAI అసిస్టెంట్లు మరియు LLM · Jan -
WSL ManagerAI అసిస్టెంట్లు మరియు LLM · Bostrot -
oh-my-piAI అసిస్టెంట్లు మరియు LLM · Can Bölük -
T3 CodeAI అసిస్టెంట్లు మరియు LLM · T3 Tools -
CC SwitchAI అసిస్టెంట్లు మరియు LLM · farion1231 -
LobeHubAI అసిస్టెంట్లు మరియు LLM · LobeHub
Microsoft Corporation నుంచి ఇతర యాప్‌లు
అన్నీ చూడండి
PowerShellటెర్మినల్స్ మరియు CLI టూల్స్ · Microsoft Corporation
PowerToysకస్టమైజేషన్ · Microsoft Corporation
NuGetప్యాకేజ్ మేనేజర్లు మరియు అప్‌డేటర్లు · Microsoft Corporation
Microsoft Azure CLIటెర్మినల్స్ మరియు CLI టూల్స్ · Microsoft Corporation
OpenSSH PreviewFTP మరియు ఫైల్ ట్రాన్స్‌ఫర్ · Microsoft Corporation
Bicep CLIప్రోగ్రామింగ్ భాషలు మరియు SDK · Microsoft Corporation