Sąraše – 1 versija programos Tokenizer, nuo 2025 m. gruodžio 29 d. iki dabartinės 1.3.3. Kiekviena veda į diegimo failus leidėjo serveryje.
| Versija | Data | Dydis | Failai |
|---|---|---|---|
| 1.3.3Naujausia | 2025 m. gruodžio 29 d. | — | 64 bitų ZIP |
Contains Typescript and C# implementation of byte pair encoding (BPE) tokenizer for OpenAI LLMs, it is based on open sourced rust implementation in the OpenAI tiktoken.
Sąraše – 1 versija programos Tokenizer, nuo 2025 m. gruodžio 29 d. iki dabartinės 1.3.3. Kiekviena veda į diegimo failus leidėjo serveryje.
| Versija | Data | Dydis | Failai |
|---|---|---|---|
| 1.3.3Naujausia | 2025 m. gruodžio 29 d. | — | 64 bitų ZIP |