Illustration dessinée par RepoMasters à partir de l’identifiant du dépôt et de la couleur de son langage. Crédits

AlphaPeu commune

NLPOptimize/flash-tokenizer

EFFICIENT AND OPTIMIZED TOKENIZER ENGINE FOR LLM INFERENCE SERVING

Propriétaire: NLPOptimize (organisation)
Étoiles: Étoiles : 457
Forks: Forks : 11
Langage: C++
Licence: Aucune
Création: 2025
Sujets: deep-learningnlppythonberttokenizerflashwordpiecewordpiece-tokenizationcppcpp17tokenizer
Rang: Alpha (250 à 699 ★) Ce que veut dire ce rang

D’autres dépôts C++