“crawler” 相关开源项目

一款 Chrome 扩展，可识别网站使用的反爬系统、验证码和指纹技术，并给出置信度。

开源网页数据平台，可将任意网站转换为结构化 API，支持抓取、爬取、搜索、监控和 AI 提取。

开源 Python 网页爬虫，可将任意网站转换为适合 LLM 使用的干净 Markdown。