首页

markdown-crawler

Public

一个多线程的网页爬虫,能够递归地爬取网站并为每个页面创建一个 Markdown 文件,专为大型语言模型的检索增强生成 (RAG) 而设计。

创建时间:2023-10-24T21:30:06
更新时间:2025-12-02T05:06:54
https://pypi.org/project/markdown-crawler/
420
Stars
0
Stars Increase