Illustration dessinée par RepoMasters à partir de l’identifiant du dépôt et de la couleur de son langage. Crédits
PrototypeCommune

snu-comparch/InfiniGen

InfiniGen: Efficient Generative Inference of Large Language Models with Dynamic KV Cache Management (OSDI'24)

Propriétaire
snu-comparch (organisation)
Étoiles
Étoiles : 195
Forks
Forks : 40
Langage
Python
Licence
Apache-2.0
Création
2024
Rang
Prototype (100 à 249 ★) Ce que veut dire ce rang
Voir sur GitHub

D’autres dépôts Python

Tous les dépôts Python