Un crawler web multithreadé 🕸️ qui explore récursivement un site web et crée un fichier 🔽 markdown pour chaque page, conçu pour LLM RAG
Explorer des sites web pour créer des fichiers markdown pour chaque page, facilitant le traitement des documents pour les applications d'IA.
Revendiquez sa page : indexée quel que soit son rang, traduite en six langues, et enrichie de vos propres mots.
Recevez une alerte par e-mail à sa prochaine version ou quand il décolle — ne ratez plus rien.
Gratuit · sans carte · désinscription à tout momentUn crawler web multithreadé 🕸️ qui explore récursivement un site web et crée un fichier 🔽 markdown pour chaque page, conçu pour LLM RAG
markdown-crawler compte 463 étoiles sur GitHub. Il a été forké 54 fois. markdown-crawler est écrit principalement en Python. Il est développé activement depuis 2023. markdown-crawler est disponible sous licence MIT. Ses principaux thèmes sont : html-to-markdown, html-to-markdown-converter, html2md, llm.
Un crawler web multithreadé 🕸️ qui explore récursivement un site web et crée un fichier 🔽 markdown pour chaque page, conçu pour LLM RAG
markdown-crawler est un projet open source. Il est distribué sous licence MIT.
Oui. markdown-crawler est gratuit et open source — vous pouvez l'utiliser, le modifier et l'héberger vous-même.
markdown-crawler est disponible sous licence MIT.
markdown-crawler est écrit principalement en Python.
Ajoutez ce badge en direct à votre README — vos étoiles GitHub et votre classement dans le répertoire, actualisés quotidiennement.
[](https://olud.ai/project/paulpierre-markdown-crawler.html)
Mesuré à partir des topics GitHub communs aux deux projets, pondérés par leur rareté.