SiteCrawler Mac版是Mac电脑上的一款直接和直观的抓取和分析网站的工具。发现、收集和检查网站生态系统中的所有链接。SiteCrawler Mac版将为您提供从特定网站可访问的所有子页面的快速概览。

软件特色

　　SiteCrawler Mac版确保始终保持在您指定的基本域范围内，从而从其分析中排除通向外部站点或源的链接。由于收集是基于网站的前端源代码，你将只收到链接，也可以访问一个普通用户浏览网站的网页浏览器。该算法能够建立一个递归搜索集合，跟踪任何链接链，直到它到达一个死胡同或离开网站，所以你不会错过任何一个子页面。SiteCrawler还将跟踪所有的重定向，并记录它们的来源，以便您更详细地了解在任何给定网站上活跃的所有链接。

　　为了开始，简单地指定一个原点域，让算法来做它的工作。然后SiteCrawler将检查网站的源代码，并收集属于同一域的所有可访问链接。如果启用了递归抓取，那么这些成员站点将再次被分析，以检测站点生态系统中的进一步链接。

　　在搜索算法完成其工作之后，SiteCrawler将为您提供一个完整的集合，其中包含所有属于原始域及其成员站点的子域和链接，这些子域和链接是有效的，并且可以从前端访问。结果可以直接在应用程序中查看和复制，也可以导出到文本文件中。