Crawler.sh

一个快速、本地优先的网站爬虫和AEO（应用程序优化）与SEO（搜索引擎优化）分析工具。您可以通过终端或本地桌面应用在几秒钟内爬取整个网站，自动进行SEO检查，提取内容为干净的Markdown格式，并导出为JSON、CSV或网站地图XML文件。