# Aavache/LLMWebCrawler

<https://repo.masters-masters.com/repos/Aavache/LLMWebCrawler>

[Accueil](https://repo.masters-masters.com/) › [Aavache](https://repo.masters-masters.com/owners/Aavache) › [LLMWebCrawler](https://repo.masters-masters.com/repos/Aavache/LLMWebCrawler)

Aavache/LLMWebCrawler, dépôt open source à 107 étoiles sur GitHub. Carte Prototype de RepoMasters. A Web Crawler based on LLMs implemented with Ray and…

| Champ | Valeur |
| --- | --- |
| Propriétaire | [Aavache](https://repo.masters-masters.com/owners/Aavache) |
| Étoiles | 107 |
| Forks | 13 |
| Langage | [Python](https://repo.masters-masters.com/languages/python) |
| Licence | Aucune |
| Création | 2023 |
| Sujets | python, ray, raylib, distributed-computing, huggingface, llm, milvus, transformer, vector-database, webcrawler |
| Rang | [Prototype (100 à 249 ★)](https://repo.masters-masters.com/ranks/rush) |
| Voir sur GitHub | [Aavache/LLMWebCrawler](https://github.com/Aavache/LLMWebCrawler) |

## Fiche du dépôt

A Web Crawler based on LLMs implemented with Ray and Huggingface. The embeddings are saved into a vector database for fast clustering and retrieval. Use it for your RAG.

Rang des dépôts qui ont 100 à 249 ★ sur GitHub. Probabilité publiée par carte tirée : 70 %. Rareté : Commune.

## D’autres dépôts Python

- [tuwang2020/mcd-fit-buddy · ★ 107 · Python · Prototype](https://repo.masters-masters.com/repos/tuwang2020/mcd-fit-buddy)
- [Ayi914/paperchecker · ★ 107 · Python · Prototype](https://repo.masters-masters.com/repos/Ayi914/paperchecker)
- [token-gate-llms/TokenGate · ★ 107 · Python · Prototype](https://repo.masters-masters.com/repos/token-gate-llms/TokenGate)
- [chrisdrackett/django-typogrify · ★ 107 · Python · Prototype](https://repo.masters-masters.com/repos/chrisdrackett/django-typogrify)
- [laanwj/decuda · ★ 107 · Python · Prototype](https://repo.masters-masters.com/repos/laanwj/decuda)
- [akaihola/pgtricks · ★ 107 · Python · Prototype](https://repo.masters-masters.com/repos/akaihola/pgtricks)

---
Données : GitHub · Illustration dessinée par RepoMasters à partir de l’identifiant du dépôt et de la couleur de son langage.