PrototypeCommune
howl-anderson/MicroTokenizer
一个轻量且功能全面的中文分词器，帮助学生了解分词器的工作原理。MicroTokenizer: A lightweight Chinese tokenizer designed for educational and research purposes. Provides a practical, hands-on approach to understanding NLP concepts, featuring multiple tokenization algorithms and customizable models. Ideal for students, researchers,…
- Propriétaire
- howl-anderson (compte personnel)
- Étoiles
- Étoiles : 160
- Forks
- Forks : 22
- Langage
- Python
- Licence
- MIT
- Création
- 2018
- Sujets
- chinese-nlptokenizerchinese-tokenizerdag-networknlp-machine-learningchinese-word-segmentationeducational-project
- Rang
- Prototype (100 à 249 ★) Ce que veut dire ce rang
Autres dépôts de howl-anderson
Les 10 dépôts de howl-anderson- howl-anderson/unlocking-the-power-of-llmsÉtoiles : 2 469ShellRC
- howl-anderson/Chinese_models_for_SpaCyÉtoiles : 673Jupyter NotebookAlpha
- howl-anderson/agentsilexÉtoiles : 459PythonAlpha
- howl-anderson/hanzi_chaiziÉtoiles : 432PythonAlpha
- howl-anderson/hanzi_char_featurizerÉtoiles : 302PythonAlpha
- howl-anderson/tools_for_corpus_of_people_dailyÉtoiles : 293PythonAlpha
D’autres dépôts Python
Tous les dépôts Python- timpratim/macbrowÉtoiles : 160PythonPrototype
- pretend1111/inko-skillÉtoiles : 160PythonPrototype
- VectifyAI/jev-doc-searchÉtoiles : 160PythonPrototype
- sethtrain/django-gitÉtoiles : 160PythonPrototype
- knipknap/GelatinÉtoiles : 160PythonPrototype
- niemeyer/hsandboxÉtoiles : 160PythonPrototype