Crawler.sh

产品概览

【产品介绍】Crawler.sh 是一款基于 Rust 构建的快速、本地优先的网页爬虫及 AEO/SEO 分析工具。它提供命令行（CLI）和原生桌面应用版本，所有数据处理均在用户本地机器完成，确保了数据隐私与处理速度。该工具旨在替代臃肿的企业级软件与缓慢的云服务，帮助用户高效完成网站审计、链接检查及数据抓取工作。【产品功能】极速站点爬取：支持自定义并发与深度，可在数秒内完成数千页面的爬取与状态码检测。Markdown 内容提取：自动将网页正文转换为干净的 Markdown 格式，便于归档或作为 AI Agent 的上下文数据。SEO 自动化分析：内置 16 项自动检查，快速识别标题缺失、元描述重复及死链等技术性 SEO 问题。灵活数据导出：支持实时流式输出，可将结果导出为 JSON、CSV、TXT 或标准 Sitemap XML。

最新月热度

暂未收录流量数据。

答案简报

Crawler.sh（UB-D8015）。产品分类为效率工具。【产品介绍】Crawler.sh 是一款基于 Rust 构建的快速、本地优先的网页爬虫及 AEO/SEO 分析工具。它提供命令行（CLI）和原生桌面应用版本，所有数据处理均在用户本地机器完成，确保了数据隐私与处理速度。该工具旨在替代臃肿的企业级软件与缓慢的云服务，帮助用户高效完成网站审计、链接检查及数据抓取工作。【产品功能】极速站点爬取：支持自定义并发与深度，可在数秒内完成数千页面的爬取与状态码检测。Markdown 内容提取：自动将网页正文转换为干净的 Markdown 格式，便于归档或作为 AI Agent 的上下文数据。SEO 自动化分析：内置 16 项自动检查，快速识别标题缺失、元描述重复及死链等技术性 SEO 问题。灵活数据导出：支持实时流式输出，可将结果导出为 JSON、CSV、TXT 或标准 Sitemap XML。

引用格式

本页不声明什么

本页只呈现 UniqueBase 已记录并带来源状态的事实；未显示的字段仅表示尚未记录，不代表不存在。

事实档案 每个字段，都应有出处

产品名称

Crawler.sh

产品分类

效率工具

最近同步

2026-10-25 20:34

常见问题

Crawler.sh的产品分类是什么？

Crawler.sh的产品分类是效率工具。

Crawler.sh的资料最近更新时间？

UniqueBase 上该条目的资料最近更新于 2026-10-25。

近邻与消歧

编号 UB-D8015

信息来源