Home Progetti gpt-tokenizer
gpt-tokenizer
TypeScript

gpt-tokenizer

Il più veloce codificatore e decodificatore BPE Tokenizer JavaScript per i modelli GPT di OpenAI (gpt-5, gpt-o*, gpt-4o, ecc.). Port di tiktoken di OpenAI con funzionalità aggiuntive.

di niieani · GitHub
Stelle
Fork
Licenza
Creato
Ultimo commit
Categoria
bpedecoderencoderMITTypeScript
Visualizza su GitHub
In parole semplici

Codifica e decodifica rapidamente il testo per i modelli di OpenAI utilizzando una leggera libreria JavaScript.

Mantieni questo progetto?

Rivendica la sua pagina: indicizzata qualunque sia il rango, tradotta in sei lingue e arricchita con le tue parole.

Rivendica questa pagina →
gpt-tokenizer — GitHub preview card
📈 Storia delle stelle
824823
2026-07-202026-08-31
📈 Segui gpt-tokenizer

Ricevi un avviso via email alla prossima release o quando decolla — non perderti nulla.

Gratis · senza carta · disdici quando vuoi
Ricevi avvisi via email →
📄 Informazioni

Il più veloce codificatore e decodificatore BPE Tokenizer JavaScript per i modelli GPT di OpenAI (gpt-5, gpt-o*, gpt-4o, ecc.). Port di tiktoken di OpenAI con funzionalità aggiuntive.

gpt-tokenizer ha 823 stelle su GitHub. È stato forkato 58 volte. gpt-tokenizer è scritto principalmente in TypeScript. È in sviluppo attivo dal 2023. gpt-tokenizer è disponibile con licenza MIT. I suoi temi principali sono: bpe, decoder, encoder, gpt-2.

Frequently asked questions

Che cos'è gpt-tokenizer?

Il più veloce codificatore e decodificatore BPE Tokenizer JavaScript per i modelli GPT di OpenAI (gpt-5, gpt-o*, gpt-4o, ecc.). Port di tiktoken di OpenAI con funzionalità aggiuntive.

gpt-tokenizer è open source?

gpt-tokenizer è un progetto open source. È rilasciato con licenza MIT.

gpt-tokenizer è gratuito?

Sì. gpt-tokenizer è gratuito e open source: puoi usarlo, modificarlo e ospitarlo autonomamente.

Con quale licenza è gpt-tokenizer?

gpt-tokenizer è disponibile con licenza MIT.

In quale linguaggio è scritto gpt-tokenizer?

gpt-tokenizer è scritto principalmente in TypeScript.

🏅 Manutentore di questo progetto?
olud.ai badge — gpt-tokenizer

Aggiungi questo badge live al tuo README — le tue stelle GitHub e il ranking della directory, aggiornati quotidianamente.

[![olud.ai](https://olud.ai/badge.php?tool=niieani-gpt-tokenizer)](https://olud.ai/project/niieani-gpt-tokenizer.html)
Altre opzioni di badge →
🧬 Condivide il DNA con🧬 Vedi la mappa del DNA →

Misurato dai topic GitHub comuni a entrambi i progetti, ponderati per la loro rarita.