PrototypeCommune
bluorion-com/ZClip
Official implementation of the paper: "ZClip: Adaptive Spike Mitigation for LLM Pre-Training".
- Propriétaire
- bluorion-com (organisation)
- Étoiles
- Étoiles : 153
- Forks
- Forks : 11
- Langage
- Python
- Licence
- Apache-2.0
- Création
- 2025
- Sujets
- adaptive-gradient-clippinglossadaptive-clippingloss-spikestable-llm-pretrainingzclipenable-high-learning-ratepre-training-stabilitytraning-stabilityllm-stable-training
- Rang
- Prototype (100 à 249 ★) Ce que veut dire ce rang
D’autres dépôts Python
Tous les dépôts Python- bertel2020/HA-HousekeeperÉtoiles : 153PythonPrototype
- silvermoong/stocking-texture-toolÉtoiles : 153PythonPrototype
- semrincaballero/Polymarket-Prediction-BotÉtoiles : 153PythonPrototype
- heynemann/pynqÉtoiles : 153PythonPrototype
- deepthawtz/fakerÉtoiles : 153PythonPrototype
- softlayer/softlayer-pythonÉtoiles : 153PythonPrototype