Kodieren und dekodieren Sie Texte für die Modelle von OpenAI schnell mit einer leichten JavaScript-Bibliothek.
Beanspruchen Sie die Seite: indexiert unabhangig vom Rang, in sechs Sprachen ubersetzt und mit Ihren eigenen Worten erganzt.
Erhalten Sie eine E-Mail-Benachrichtigung beim nächsten Release oder wenn es durchstartet.
Kostenlos · ohne Karte · jederzeit abbestellbarDer schnellste JavaScript BPE Tokenizer Encoder Decoder für OpenAI's GPT-Modelle (gpt-5, gpt-o*, gpt-4o usw.). Port von OpenAI's tiktoken mit zusätzlichen Funktionen.
gpt-tokenizer hat 827 Sterne auf GitHub. Es wurde 58-mal geforkt. gpt-tokenizer ist hauptsächlich in TypeScript geschrieben. Es wird seit 2023 aktiv entwickelt. gpt-tokenizer ist unter der MIT-Lizenz verfügbar. Die Hauptthemen sind: bpe, decoder, encoder, gpt-2.
Was ist gpt-tokenizer?
Der schnellste JavaScript BPE Tokenizer Encoder Decoder für OpenAI's GPT-Modelle (gpt-5, gpt-o*, gpt-4o usw.). Port von OpenAI's tiktoken mit zusätzlichen Funktionen.
Ist gpt-tokenizer Open Source?
gpt-tokenizer ist ein Open-Source-Projekt. Es wird unter der MIT-Lizenz veröffentlicht.
Ist gpt-tokenizer kostenlos?
Ja. gpt-tokenizer ist kostenlos und Open Source — Sie können es nutzen, anpassen und selbst hosten.
Unter welcher Lizenz steht gpt-tokenizer?
gpt-tokenizer ist unter der MIT-Lizenz verfügbar.
In welcher Sprache ist gpt-tokenizer geschrieben?
gpt-tokenizer ist hauptsächlich in TypeScript geschrieben.
Fügen Sie dieses Live-Abzeichen zu Ihrem README hinzu — Ihre GitHub-Sterne und Verzeichnisrang, täglich aktualisiert.
[](https://opensourceai.tech/project/niieani-gpt-tokenizer.html)
Ermittelt aus gemeinsamen GitHub-Topics beider Projekte, gewichtet nach ihrer Seltenheit.