Illustration dessinée par RepoMasters à partir de l’identifiant du dépôt et de la couleur de son langage. Crédits
BêtaRare

niieani/gpt-tokenizer

The fastest JavaScript BPE Tokenizer Encoder Decoder for OpenAI's GPT models (gpt-5, gpt-o*, gpt-4o, etc.). Port of OpenAI's tiktoken with additional features.

Propriétaire
niieani (compte personnel)
Étoiles
Étoiles : 857
Forks
Forks : 66
Langage
TypeScript
Licence
MIT
Création
2023
Sujets
bpegpt-2gpt-3machine-learninggpt-4tokenizerdecoderencoderopenaigpt-4o
Rang
Bêta (700 à 1 999 ★) Ce que veut dire ce rang
Voir sur GitHub

Autres dépôts de niieani

Les 4 dépôts de niieani

D’autres dépôts TypeScript

Tous les dépôts TypeScript