Illustration : image publique du projet, pixelisée par RepoMasters. Crédits
RCÉpique

ModelTC/LightLLM

LightLLM is a Python-based LLM (Large Language Model) inference and serving framework, notable for its lightweight design, easy scalability, and high-speed performance.

Propriétaire
ModelTC (organisation)
Étoiles
Étoiles : 4 349
Forks
Forks : 383
Langage
Python
Licence
Apache-2.0
Création
2023
Sujets
deep-learninggptllamallmmodel-servingnlpopenai-triton
Rang
RC (2 000 à 4 999 ★) Ce que veut dire ce rang
Voir sur GitHub

Autres dépôts de ModelTC

Les 10 dépôts de ModelTC

D’autres dépôts Python

Tous les dépôts Python