Illustration dessinée par RepoMasters à partir de l’identifiant du dépôt et de la couleur de son langage. Crédits
StableTrès rare

flashinfer-ai/flashinfer

FlashInfer: Kernel Library for LLM Serving

Propriétaire
flashinfer-ai (organisation)
Étoiles
Étoiles : 6 832
Forks
Forks : 1 684
Langage
Cuda
Licence
Apache-2.0
Création
2023
Sujets
gpularge-large-modelscudapytorchllm-inferencejitattentionnvidiadistributed-inferencemoe
Rang
Stable (5 000 à 19 999 ★) Ce que veut dire ce rang
Voir sur GitHub

Autres dépôts de flashinfer-ai

Les 3 dépôts de flashinfer-ai

D’autres dépôts Cuda

Tous les dépôts Cuda