Illustration dessinée par RepoMasters à partir de l’identifiant du dépôt et de la couleur de son langage. Crédits
AlphaPeu commune

Helldez/BigMoeOnEdge

Run MoE models bigger than your RAM. Frontier-size MoE on a phone, laptop, edge. Lossless, on stock llama.cpp. An adaptive streaming optimizer. Any hardware, any OS, any model, any quantization, behind a local OpenAI-compatible server.

Propriétaire
Helldez (compte personnel)
Étoiles
Étoiles : 698
Forks
Forks : 81
Langage
C++
Licence
Apache-2.0
Création
2026
Sujets
androidcppedge-aiggufinferencellama-cppllmmixture-of-expertsmoeon-device-ai
Rang
Alpha (250 à 699 ★) Ce que veut dire ce rang
Voir sur GitHub

Autres dépôts de Helldez

Les 2 dépôts de Helldez

D’autres dépôts C++

Tous les dépôts C++