2025년 12월 29일부터 현재 버전 1.3.3까지 Tokenizer의 1개 버전을 모았습니다. 모든 버전은 제공사의 공식 설치 파일로 연결됩니다.
Tokenizer 이전 버전 및 전체 버전
Contains Typescript and C# implementation of byte pair encoding (BPE) tokenizer for OpenAI LLMs, it is based on open sourced rust implementation in the OpenAI tiktoken.
- 라이선스오픈 소스
- 버전1.3.3
- 요구 사항Windows 10, 11
- 출시일2025년 12월 29일
- GitHub 스타★ 212
AI 어시스턴트 및 LLM 인기 1위
전체 보기-
Claude CodeAI 어시스턴트 및 LLM · Anthropic PBC -
Codex CLIAI 어시스턴트 및 LLM · OpenAI, Inc. -
ChatGPTAI 어시스턴트 및 LLM · lencx -
GPT4AllAI 어시스턴트 및 LLM · Nomic -
JanAI 어시스턴트 및 LLM · Jan -
WSL ManagerAI 어시스턴트 및 LLM · Bostrot -
oh-my-piAI 어시스턴트 및 LLM · Can Bölük -
T3 CodeAI 어시스턴트 및 LLM · T3 Tools -
CC SwitchAI 어시스턴트 및 LLM · farion1231 -
LobeHubAI 어시스턴트 및 LLM · LobeHub
Microsoft Corporation의 다른 프로그램
전체 보기
PowerShell터미널 및 CLI 도구 · Microsoft Corporation
PowerToys꾸미기 · Microsoft Corporation
NuGet패키지 관리자 및 업데이트 도구 · Microsoft Corporation
Microsoft Azure CLI터미널 및 CLI 도구 · Microsoft Corporation
OpenSSH PreviewFTP 및 파일 전송 · Microsoft Corporation
Bicep CLI프로그래밍 언어 및 SDK · Microsoft Corporation