Codifica e decodifica il testo per i modelli di OpenAI rapidamente utilizzando una leggera libreria JavaScript.
Rivendica la sua pagina: indicizzata qualunque sia il rango, tradotta in sei lingue e arricchita con le tue parole.
Ricevi un avviso via email alla prossima release o quando decolla — non perderti nulla.
Gratis · senza carta · disdici quando vuoiIl più veloce codificatore e decodificatore BPE Tokenizer JavaScript per i modelli GPT di OpenAI (gpt-5, gpt-o*, gpt-4o, ecc.). Port di tiktoken di OpenAI con funzionalità aggiuntive.
gpt-tokenizer ha 827 stelle su GitHub. È stato forkato 58 volte. gpt-tokenizer è scritto principalmente in TypeScript. È in sviluppo attivo dal 2023. gpt-tokenizer è disponibile con licenza MIT. I suoi temi principali sono: bpe, decoder, encoder, gpt-2.
Che cos'è gpt-tokenizer?
Il più veloce codificatore e decodificatore BPE Tokenizer JavaScript per i modelli GPT di OpenAI (gpt-5, gpt-o*, gpt-4o, ecc.). Port di tiktoken di OpenAI con funzionalità aggiuntive.
gpt-tokenizer è open source?
gpt-tokenizer è un progetto open source. È rilasciato con licenza MIT.
gpt-tokenizer è gratuito?
Sì. gpt-tokenizer è gratuito e open source: puoi usarlo, modificarlo e ospitarlo autonomamente.
Con quale licenza è gpt-tokenizer?
gpt-tokenizer è disponibile con licenza MIT.
In quale linguaggio è scritto gpt-tokenizer?
gpt-tokenizer è scritto principalmente in TypeScript.
Aggiungi questo badge live al tuo README — le tue stelle GitHub e il ranking della directory, aggiornati quotidianamente.
[](https://olud.ai/project/niieani-gpt-tokenizer.html)
Misurato dai topic GitHub comuni a entrambi i progetti, ponderati per la loro rarita.