“web-crawler” 相关开源项目

开源 Python 网页爬虫，可将任意网站转换为适合 LLM 使用的干净 Markdown。

Python 工具，输入网站首页 URL 即可按 52 条 SEO 规则审计全站，并生成 PDF、XLSX 与 Markdown 报告。