Codifica y decodifica texto para los modelos de OpenAI rápidamente usando una biblioteca de JavaScript ligera.
Reivindica su pagina: indexada sea cual sea su posicion, traducida a seis idiomas y enriquecida con tus propias palabras.
Recibe una alerta por correo en su próximo lanzamiento o cuando despegue — no te pierdas nada.
Gratis · sin tarjeta · cancela cuando quierasEl codificador y decodificador BPE Tokenizer de JavaScript más rápido para los modelos GPT de OpenAI (gpt-5, gpt-o*, gpt-4o, etc.). Puerto de tiktoken de OpenAI con características adicionales.
gpt-tokenizer tiene 827 estrellas en GitHub. Se ha bifurcado 58 veces. gpt-tokenizer está escrito principalmente en TypeScript. Se desarrolla activamente desde 2023. gpt-tokenizer está disponible bajo la licencia MIT. Sus temas principales son: bpe, decoder, encoder, gpt-2.
¿Qué es gpt-tokenizer?
El codificador y decodificador BPE Tokenizer de JavaScript más rápido para los modelos GPT de OpenAI (gpt-5, gpt-o*, gpt-4o, etc.). Puerto de tiktoken de OpenAI con características adicionales.
¿gpt-tokenizer es de código abierto?
gpt-tokenizer es un proyecto de código abierto. Se distribuye bajo la licencia MIT.
¿gpt-tokenizer es gratis?
Sí. gpt-tokenizer es gratuito y de código abierto: puedes usarlo, modificarlo y alojarlo tú mismo.
¿Bajo qué licencia está gpt-tokenizer?
gpt-tokenizer está disponible bajo la licencia MIT.
¿En qué lenguaje está escrito gpt-tokenizer?
gpt-tokenizer está escrito principalmente en TypeScript.
Agrega este distintivo en vivo a tu README — tus estrellas de GitHub y rango en el directorio, actualizados diariamente.
[](https://opensourceai.tech/project/niieani-gpt-tokenizer.html)
Medido a partir de los topics de GitHub comunes a ambos proyectos, ponderados por su rareza.