# tiktoken-go/tokenizer

<https://repo.masters-masters.com/repos/tiktoken-go/tokenizer>

[Accueil](https://repo.masters-masters.com/) › [tiktoken-go](https://repo.masters-masters.com/owners/tiktoken-go) › [tokenizer](https://repo.masters-masters.com/repos/tiktoken-go/tokenizer)

tiktoken-go/tokenizer, dépôt open source à 460 étoiles sur GitHub. Carte Alpha de RepoMasters. Pure Go implementation of OpenAI's tiktoken tokenizer

| Champ | Valeur |
| --- | --- |
| Propriétaire | [tiktoken-go](https://repo.masters-masters.com/owners/tiktoken-go) |
| Étoiles | 460 |
| Forks | 39 |
| Langage | [Go](https://repo.masters-masters.com/languages/go) |
| Licence | MIT |
| Création | 2023 |
| Rang | [Alpha (250 à 699 ★)](https://repo.masters-masters.com/ranks/b_movie) |
| Voir sur GitHub | [tiktoken-go/tokenizer](https://github.com/tiktoken-go/tokenizer) |

## Fiche du dépôt

Pure Go implementation of OpenAI's tiktoken tokenizer

Rang des dépôts qui ont 250 à 699 ★ sur GitHub. Probabilité publiée par carte tirée : 20 %. Rareté : Peu commune.

## D’autres dépôts Go

- [iximiuz/labctl · ★ 460 · Go · Alpha](https://repo.masters-masters.com/repos/iximiuz/labctl)
- [langgenius/dify-plugin-daemon · ★ 460 · Go · Alpha](https://repo.masters-masters.com/repos/langgenius/dify-plugin-daemon)
- [programmersd21/flow · ★ 460 · Go · Alpha](https://repo.masters-masters.com/repos/programmersd21/flow)
- [facebookarchive/httpcontrol · ★ 460 · Go · Alpha](https://repo.masters-masters.com/repos/facebookarchive/httpcontrol)
- [siddontang/go · ★ 460 · Go · Alpha](https://repo.masters-masters.com/repos/siddontang/go)
- [sselph/scraper · ★ 460 · Go · Alpha](https://repo.masters-masters.com/repos/sselph/scraper)

---
Données : GitHub · Illustration dessinée par RepoMasters à partir de l’identifiant du dépôt et de la couleur de son langage.