Encodez et décodez rapidement du texte pour les modèles d'OpenAI en utilisant une bibliothèque JavaScript légère.
Revendiquez sa page : indexée quel que soit son rang, traduite en six langues, et enrichie de vos propres mots.
Recevez une alerte par e-mail à sa prochaine version ou quand il décolle — ne ratez plus rien.
Gratuit · sans carte · désinscription à tout momentLe plus rapide encodeur décodeur BPE Tokenizer JavaScript pour les modèles GPT d'OpenAI (gpt-5, gpt-o*, gpt-4o, etc.). Port de tiktoken d'OpenAI avec des fonctionnalités supplémentaires.
gpt-tokenizer compte 827 étoiles sur GitHub. Il a été forké 58 fois. gpt-tokenizer est écrit principalement en TypeScript. Il est développé activement depuis 2023. gpt-tokenizer est disponible sous licence MIT. Ses principaux thèmes sont : bpe, decoder, encoder, gpt-2.
Qu'est-ce que gpt-tokenizer ?
Le plus rapide encodeur décodeur BPE Tokenizer JavaScript pour les modèles GPT d'OpenAI (gpt-5, gpt-o*, gpt-4o, etc.). Port de tiktoken d'OpenAI avec des fonctionnalités supplémentaires.
gpt-tokenizer est-il open source ?
gpt-tokenizer est un projet open source. Il est distribué sous licence MIT.
gpt-tokenizer est-il gratuit ?
Oui. gpt-tokenizer est gratuit et open source — vous pouvez l'utiliser, le modifier et l'héberger vous-même.
Sous quelle licence est gpt-tokenizer ?
gpt-tokenizer est disponible sous licence MIT.
Dans quel langage gpt-tokenizer est-il écrit ?
gpt-tokenizer est écrit principalement en TypeScript.
Ajoutez ce badge en direct à votre README — vos étoiles GitHub et votre classement dans le répertoire, actualisés quotidiennement.
[](https://olud.ai/project/niieani-gpt-tokenizer.html)
Mesuré à partir des topics GitHub communs aux deux projets, pondérés par leur rareté.