SmartCrawlerMac版是Mac电脑上的一款开发软件。SmartCrawlerMac版可以帮助用户扫描网站是否有页面缺失、加载时间慢、链接错误等问题。让你输入一个网站，并跟踪你网站周围的链接。当爬虫完成抓取时通知您。

软件特色

　　SmartCrawlerMac版可以实时查看所访问页面的信息。允许您配置爬虫来跟踪或忽略哈希、查询、到其他域的链接、同一域的链接、请求之间的延迟以及用户代理。

　　SmartCrawlerMac版可以将结果导出到一个易于阅读的HTML文件中，以查看您的网站上哪些地方链接到了死页或缺少了什么。

开发