Illustration : image publique du projet, pixelisée par RepoMasters. Crédits
StableTrès rare

FMInference/FlexLLMGen

Running large language models on a single GPU for throughput-oriented scenarios.

Archivé : ce dépôt n’évolue plus

Propriétaire
FMInference (organisation)
Étoiles
Étoiles : 9 343
Forks
Forks : 587
Langage
Python
Licence
Apache-2.0
Création
2023
Sujets
deep-learninggpt-3high-throughputlarge-language-modelsmachine-learningoffloadingopt
Rang
Stable (5 000 à 19 999 ★) Ce que veut dire ce rang
Voir sur GitHub

Autres dépôts de FMInference

Les 3 dépôts de FMInference

D’autres dépôts Python

Tous les dépôts Python