WordPress如何查看搜索引擎蜘蛛的爬行日志

作为一个合格的站长，学会分析蜘蛛日志很重要，我们可以通过网站日志中的数据记录，了解各个搜索引擎蜘蛛经常爬行哪些页面，有些目录可以屏蔽不被爬行，分析网站是否处在健康的状态。
所以利用好蜘蛛日志分析工具也不可忽视，调整好网站正确引导搜索引擎蜘蛛的抓取。这个在服务商后台也能下载，但是很麻烦。推荐一个方便快捷方法。

wp-log-robots是一款记录搜索引擎蜘蛛在你网站上访问日志的插件。它可以记录搜索引擎蜘蛛访问网站的次数，也可以取得搜索引擎蜘蛛访问网站的记录，是wordpress必备蜘蛛访问日志插件之一。

安装与设置

可以后台搜索下载安装这个插件。安装后启用，不用任何设置，直接使用。访问日志查看方法，直接在浏览器地址栏输入以下链接，就可以看到蜘蛛访问记录了。

• http://你的域名/robots_log.txt

下载地址：

直接下载：http://downloads.wordpress.org/plugin/wp-log-robots.0.1.1.zip

插件介绍及下载：https://cn.wordpress.org/plugins/wp-robots-log/