tiktoken-rs
Libreria tokenizer pronta all'uso per lavorare con GPT e tiktoken
Tokenizza il testo per i modelli OpenAI per prepararlo al processamento e al conteggio dei token.
Rivendica la sua pagina: indicizzata qualunque sia il rango, tradotta in sei lingue e arricchita con le tue parole.
Ricevi un avviso via email alla prossima release o quando decolla — non perderti nulla.
Gratis · senza carta · disdici quando vuoiLibreria tokenizer pronta all'uso per lavorare con GPT e tiktoken
tiktoken-rs ha 401 stelle su GitHub. È stato forkato 74 volte. tiktoken-rs è scritto principalmente in Rust. È in sviluppo attivo dal 2023. tiktoken-rs è disponibile con licenza MIT. I suoi temi principali sono: bpe, openai, rust, tokenizer.
Che cos'è tiktoken-rs?
Libreria tokenizer pronta all'uso per lavorare con GPT e tiktoken
tiktoken-rs è open source?
tiktoken-rs è un progetto open source. È rilasciato con licenza MIT.
tiktoken-rs è gratuito?
Sì. tiktoken-rs è gratuito e open source: puoi usarlo, modificarlo e ospitarlo autonomamente.
Con quale licenza è tiktoken-rs?
tiktoken-rs è disponibile con licenza MIT.
In quale linguaggio è scritto tiktoken-rs?
tiktoken-rs è scritto principalmente in Rust.
Aggiungi questo badge live al tuo README — le tue stelle GitHub e il ranking della directory, aggiornati quotidianamente.
[](https://olud.ai/project/zurawiki-tiktoken-rs.html)
Misurato dai topic GitHub comuni a entrambi i progetti, ponderati per la loro rarita.