功能介绍

　　识别已抓取的网址

　　查看和分析Googlebot和其他搜索漫游器能够抓取哪些网址，时间和频率。

　　发现抓取频率

　　深入了解哪些搜索机器人最常抓取，每天抓取多少网址以及机器人事件总数。

　　找到断开的链接和错误

　　发现搜索引擎漫游器在抓取您的网站时遇到的所有响应代码，损坏的链接和错误。

　　审核重定向

　　查找搜索机器人遇到的临时和永久重定向，这可能与浏览器或模拟爬网中的重定向不同。

　　改善抓取预算

　　分析您网站的最常被抓取的网址和目录，以识别浪费并提高抓取效率。

　　识别大页面和慢速页面

　　查看下载的平均字节数以及识别大页面或性能问题所花费的时间。

　　查找未抓取和孤立页面

　　导入网址列表并与日志文件数据进行匹配，以识别Googlebot尚未抓取的孤立或未知网页或网址。

　　结合并比较任何数据

　　使用“URL”列对日志文件数据导入和匹配任何数据。因此，导入爬网，指令或外部链接数据以进行高级分析。

软件特色

　　1、识别已抓取的网址

　　查看和分析Googlebot和其他搜索漫游器能够抓取哪些网址，时间和频率。

　　2、发现抓取频率

　　深入了解哪些搜索机器人最常抓取，每天抓取多少网址以及机器人事件总数。

　　3、找到断开的链接和错误

　　发现搜索引擎漫游器在抓取您的网站时遇到的所有响应代码，损坏的链接和错误。

　　4、审核重定向

　　查找搜索机器人遇到的临时和永久重定向，这可能与浏览器或模拟爬网中的重定向不同。

　　5、改善抓取预算

　　分析您网站的最常被抓取的网址和目录，以识别浪费并提高抓取效率。

　　6、识别大页面和慢速页面

　　查看下载的平均字节数以及识别大页面或性能问题所花费的时间。

　　7、查找未抓取和孤立页面

　　导入网址列表并与日志文件数据进行匹配，以识别Googlebot尚未抓取的孤立或未知网页或网址。

　　8、结合并比较任何数据

　　使用“URL”列对日志文件数据导入和匹配任何数据。因此，导入爬网，指令或外部链接数据以进行高级分析。

使用方法

　　一、下载安装软件，选择下面的工具进行安装。

　　二、安装完成后打开软件，将网站生成的LOG日志文件导入即可快速进行分析。