Illustration dessinée par RepoMasters à partir de l’identifiant du dépôt et de la couleur de son langage. Crédits
PrototypeCommune

actual-computer/toks

exact tokenizers ids, as fast as the hardware allows

Propriétaire
actual-computer (organisation)
Étoiles
Étoiles : 119
Forks
Forks : 10
Langage
C
Licence
Apache-2.0
Création
2026
Sujets
assemblyavx2bpechuggingfaceneonsentencepiecesimdtokenizerwordpiece
Rang
Prototype (100 à 249 ★) Ce que veut dire ce rang
Voir sur GitHub

D’autres dépôts C

Tous les dépôts C