网站蜘蛛log日志分析解读(SEO站长自查诊断必备工作)

作为一名SEO发烧友，剖析网站蜘蛛log日志是不可缺少的，根据网站日志中的信息纪录，网站站长们就可以有效的确诊大家的网站是不是处于身心健康情况。例如时尚博主的网站近期就遭受许多挂暗链的进攻，不论是网站权...

作为一名SEO发烧友，剖析网站蜘蛛log日志是不可缺少的，根据网站日志中的信息纪录，网站站长们就可以有效的确诊大家的网站是不是处于身心健康情况。例如时尚博主的网站近期就遭受许多挂暗链的进攻，不论是网站权重值或是总流量都产生非常大损害，因此网站刻不容缓，根据网站调节正确对待搜索引擎蜘蛛的抓取。

根据百度百科大家还可以认识到，所说的网站日志指的便是纪录web服务器接受解决要求及其运行时错误等各种各样初始数据的以log末尾的文档。这儿网站站长们要留意的是文档以log为后缀名，只需将其免费下载出来应用专用工具剖析就可以。

不一样的云服务器和虚拟主机储放的log文件部位或是有一定区别的，但一般获得方式也是非常简单的，如时尚博主网络服务器安裝的是宝塔面板，网站日志文档储存在文档-wwwlogs文件夹中，寻找相匹配网站的log文件随后免费下载出来。

网站日志分析工具是有很多的，例如线上的网站日志专用工具拉格好(http://www.loghao.com/)，此外时尚博主常见的是亿光年网站日志分析工具。这种专用工具如出一辙，文档和设备都是有了，下面咱们就深层次研究下怎样剖析这种网站数据信息。

BaiDu Spider：就是代表百度搜索搜索引擎蜘蛛，从上面能够看见恋音seo技术blog的搜索引擎网络爬虫来源于百度搜索，占有率52%

Sogou Spide：代表搜狗搜索搜索引擎蜘蛛，浏览频次虽少，可是抓取总产量却非常大，这让时尚博主发觉了这其中的猫腻，缘故便是本网站某一频道被别人进攻，挂掉很多给搜狗搜索搜索引擎蜘蛛抓取的暗链。

Google蜘蛛：表明Google搜索引擎蜘蛛，做GoogleSEO的网站站长必须多多留意。

Alexa Spider：代表网站世界排名搜索引擎蜘蛛，该网络爬虫关键剖析网站的浏览总流量，并统计分析网站世界排名，现阶段本网站在世界排名610481位。

此外，实际上也是有别的搜索引擎网络爬虫的，如Yahoo蜘蛛、360Spider等，以上仅仅本网站的搜索引擎蜘蛛概述剖析，由于刚换网络服务器的缘故，现阶段蜘蛛抓爬的数据信息规模是非常小的，仅作参考。根据日志专用工具积极与搜索引擎蜘蛛沟通交流，大家可以进一步剖析网站抓取状况和状态码剖析。

文件目录抓取：可以剖析网站文件目录的抓取量，掌握搜索引擎蜘蛛的喜好。根据图中能够看见Sogou Spide关键抓取了我的/kjzx/文件目录，同别的文件目录比照抓取量非常大，发现异常。因此我进到网站网站根目录开展查询，发觉了挂暗链的脚本文件，这也证实了时尚博主前边的分辨。

网页页面抓取：页面抓取量是相对稳定的，沒有哪个网页页面抓取量大而发现异常，这儿时尚博主就不会再截屏，但时尚博主发觉抓取量较大的网页页面便是robots.txt文件，因此工作人员们设定好robots标准也是很重要的。

200代表搜索引擎蜘蛛浏览取得成功;

404代表网页页面无法打开;

301代表页面跳转;

304代表手机客户端早已实行了GET，但文档未转变;

500状态码表明网络服务器碰到不正确，没法进行要求;

403状态码表明网络服务器拒绝请求。

以上是本网站碰到的一些蜘蛛状态码(大量状态码请参照：网站日志普遍HTTP状态码剖析)，网站站长尤其是查询非200值的状态码，剖析这种出现异常的URL途径，非常容易就寻找网站问题之所属。

网站日志剖析对而言应该是必不可少专业技能，不论是新网站或是老网站，网站日志剖析都是有非常大的功效。根据日志剖析掌握网站蜘蛛抓取次数、是不是被关入沙盒游戏、网站是不是被K、搜索出现异常抓取等。

总结：根据网站蜘蛛日志剖析，SEO网站站长可以非常好自纠自查确诊网站是不是发生问题，不但可以掌握网站的身体状况，根据抓取量还能够进一步掌握搜索引擎蜘蛛的喜好，清晰网站内容营销的重心之所在，还可以发挥不错的指导意义。