# microsoft/Tokenizer

<https://repo.masters-masters.com/repos/microsoft/Tokenizer>

[Accueil](https://repo.masters-masters.com/) › [microsoft](https://repo.masters-masters.com/owners/microsoft) › [Tokenizer](https://repo.masters-masters.com/repos/microsoft/Tokenizer)

microsoft/Tokenizer, dépôt open source à 214 étoiles sur GitHub. Carte Prototype de RepoMasters. Typescript and .NET implementation of BPE tokenizer for…

| Champ | Valeur |
| --- | --- |
| Propriétaire | [microsoft](https://repo.masters-masters.com/owners/microsoft) |
| Étoiles | 214 |
| Forks | 36 |
| Langage | [C\#](https://repo.masters-masters.com/languages/c-sharp) |
| Licence | MIT |
| Création | 2023 |
| Sujets | ai, gpt, llm, openai, tokenizer |
| Rang | [Prototype (100 à 249 ★)](https://repo.masters-masters.com/ranks/rush) |
| Voir sur GitHub | [microsoft/Tokenizer](https://github.com/microsoft/Tokenizer) |

## Fiche du dépôt

Typescript and .NET implementation of BPE tokenizer for OpenAI LLMs.

Rang des dépôts qui ont 100 à 249 ★ sur GitHub. Probabilité publiée par carte tirée : 70 %. Rareté : Commune.

## Autres dépôts de microsoft

- [microsoft/vscode · ★ 194 462 · TypeScript · LTS](https://repo.masters-masters.com/repos/microsoft/vscode)
- [microsoft/markitdown · ★ 193 456 · Python · LTS](https://repo.masters-masters.com/repos/microsoft/markitdown)
- [microsoft/PowerToys · ★ 140 398 · C · LTS](https://repo.masters-masters.com/repos/microsoft/PowerToys)
- [microsoft/generative-ai-for-beginners · ★ 122 788 · Jupyter Notebook · LTS](https://repo.masters-masters.com/repos/microsoft/generative-ai-for-beginners)
- [microsoft/TypeScript · ★ 111 714 · Go · LTS](https://repo.masters-masters.com/repos/microsoft/TypeScript)
- [microsoft/terminal · ★ 105 311 · C++ · LTS](https://repo.masters-masters.com/repos/microsoft/terminal)

## D’autres dépôts C\#

- [FabriBertani/Plugin.Maui.ScreenSecurity · ★ 214 · C\# · Prototype](https://repo.masters-masters.com/repos/FabriBertani/Plugin.Maui.ScreenSecurity)
- [microsoft/vs-solutionpersistence · ★ 214 · C\# · Prototype](https://repo.masters-masters.com/repos/microsoft/vs-solutionpersistence)
- [DecartAI/Decart-XR · ★ 214 · C\# · Prototype](https://repo.masters-masters.com/repos/DecartAI/Decart-XR)
- [PureMVC/puremvc-csharp-multicore-framework · ★ 214 · C\# · Prototype](https://repo.masters-masters.com/repos/PureMVC/puremvc-csharp-multicore-framework)
- [riyadparvez/data-structures-csharp · ★ 214 · C\# · Prototype](https://repo.masters-masters.com/repos/riyadparvez/data-structures-csharp)
- [alphaleonis/AlphaVSS · ★ 214 · C\# · Prototype](https://repo.masters-masters.com/repos/alphaleonis/AlphaVSS)

---
Données : GitHub · Illustration dessinée par RepoMasters à partir de l’identifiant du dépôt et de la couleur de son langage.