之前有一段时间用的是宝塔专业版的 网站监控报表 插件。各项数据非常方便。但因为某些不可描述的原因就很久前就没有用了。那么我们怎么来分析查看蜘蛛抓取次数呢。

我们可以通过分析网站的访问日志来查看。然后借用第三方分析工具/平台。可以更简单明了的阅读日志。

首先宝塔为例。日志存放目录: /www/wwwlogs

宝塔查看网站日志分析搜索引擎蜘蛛抓取次数-钻芒博客然后我们通过在线分析工具和软件版本分析工具查看:

简单介绍:

在线版:

在左侧选择上传日志文件。补充上方部分参数,点击分析即可查看结果。

宝塔查看网站日志分析搜索引擎蜘蛛抓取次数-钻芒博客

软件版:

新建任务,选择日志文件和分析保存目录,会自动进行分析。

宝塔查看网站日志分析搜索引擎蜘蛛抓取次数-钻芒博客

分析完成后,会自动创建一个带有html的文件夹。打开网页即可在浏览器内查看分析数据,如下图:

宝塔查看网站日志分析搜索引擎蜘蛛抓取次数-钻芒博客