如何解读网站日志:高效网站日志分析的实用技巧
如何实施网站日志剖析
在实施网站日志剖析前,需首先搞清楚:
1.何为网站日志?
2.在何种状况下需进行网站日志剖析?
何为网站日志?
网站日志,确切地说是服务器日志。借助服务器日志,我们能得知用户在何种IP、何种分辨率的设备、何时、何地访问了我们的网站,以及当时访问的页面是否顺畅。
对于我们的网站来说,搜索引擎同样是网站用户之一。本文所提及的网站日志剖析,更多是在剖析搜索引擎这类用户。
在何种状况下需进行网站日志剖析?
1、久站(成立1年且正常运营的网站):SEO流量呈现异常波动。
2、新成立不久的站点(成立6个月以下的网站):定期剖析。
掌握以上两种状况后,我们应如何实施网站日志剖析?
针对久站网站日志剖析
作为一个SEOer,需要定期执行数据分析。了解网站SEO流量的波动状况。当网站SEO流量波动达到10%及以上时,就需要进一步深入剖析。
分为两种情况:
了解外部环境:了解外部环境的前提在于平时你得有一定的人脉基础,如果没有也没关系。泡两个地方——去搜索引擎站长平台或者加入搜索引擎站长群。比如,像百度搜索引擎,它拥有站长平台,也会相应建立站长QQ群。
有人脉基础的情况下,可以直接了解外部环境的情况——是否也出现类似幅度的波动?这个的前提要结合你短期做过的SEO操作一并考虑,避免误判。
无人脉的情况,泡群、泡站长平台。通常如果是搜索引擎算法升级,会在群里或者站长平台有相关的小道信息出现。
如果是搜索引擎自身算法升级导致的流量波动,那么就得根据新算法做相应的站内优化。
比如,百度冰桶3.0版本提出:将严厉打击在百度移动搜索中,打断用户完整搜索路径的调起行为。
如果站点存在以上的情况就需要有针对性地做优化:无论是通过对接的APPLINK调起,还是网页自主调起的应用,以及普通的网页,都应是可返回,可关闭的。用户校验搜索结果的准确性,不需要额外下载APP或者权限。
分析内部环境:在分析内部环境之前,再次提出这个公式:
SEO流量=抓取量收录率(准确来说应该是索引率)首页率*点击率。当抓取频次、抓取时间出现异常必然引起抓取量的减少。
因此,排除了外部因素,就需要对网站的日志进行分析。如果你的站点是中文站点,且是百度站长平台的VIP用户。那么,你就可以先借助百度站长平台的“抓取频次”工具,先了解搜索引擎近期的抓取频次、抓取时间、异常页面。通常借助这个工具,我们可以对搜索引擎近期抓取情况有初步了解,并且可以借助这个工具,相应的找到一些解决办法。
在此先解释两个概念,方便理解:
1.抓取频次:抓取频次是搜索引擎在单位时间内(天级)对网站服务器抓取的总次数,如果搜索引擎对站点的抓取频次过高,很有可能造成服务器不稳定,Baiduspider会根据网站内容更新频率和服务器压力等因素自动调整抓取频次。
2.抓取时间:指的是搜索引擎每次抓取耗时。
影响抓取频次的可能原因
1.抓取频次上限误调,调低了,则会直接影响到抓取量减少,抓取量减少则索引量少,流量相应减少。
2.运营层面:存在大量重复页面(情况一:自身网站存在大量重复的内容。情况二:自身网站内容采集了大量互联网已存在的内容)。从搜索引擎的目标出发——搜索引擎希望抓取到更多更好的页面,而你的网站产出的却是网上泛滥的内容,何必浪费资源在你的网站上?另外,网站内容太久不更新。建议,通过有规律定期产出优质内容来解决此问题。
抓取时间变长,也会导致网站抓取量减少。通常存在的可能情况是,服务器速度变慢导致抓取时间变长。还有一种可能是与网站自身结构有关系。层级太深导致
总结一下久站如何做网站日志剖析(针对中文站点):
排除外部因素:了解搜索引擎最新算法是否发生变动、同行是否也有类似变化。
内部分析:1.使用工具:百度站长平台。(非VIP账户看下文介绍)
2.分析方法:主要使用抓取频次分析工具进行分析,网站抓取频次、抓取时间、异常页面情况等数据变化。并与相关部门进行对接解决。
针对新站如何做网站日志剖析
对新站做网站日志剖析,主要目的在于如何促进新站被索引并获得一定的排名。通常新站建立之初都会进入沙盒期(沙盒是指一个新站建立后搜索引擎会对其进行一个类似资格评价的阶段,我们将这个阶段称为沙盒,在沙盒里面的这段时间,我们将其称为沙盒期,沙盒期一般都是2-6个月。)进入沙盒期并不意味着站点不会被抓取,由于新站点建立之初,权重较低,内容量较少,因此抓取量等相应的也不会太多。
前期,我们分析新站点网站日志,主要是分析站点是否有被爬虫抓取过?如果没有的情况下,一来是要让站点持续更新优质的内容,二来,在站点建设较为完善的情况下,需要主动向搜索引擎提交链接,让爬虫发现你的站点。除此之外,还可以通过正确渠道交换一些优质的友情链接,吸引爬虫来抓取。
通常新站点建立之初较难获得百度站长平台VIP账号,那么分析网站日志,我们可以通过下载光年日志分析工具进行分析。
步骤
1、下载网站日志(如果是企业站点,可以直接让运维部门的同事帮忙下载,如果是个人站长,直接在你所购买的虚拟主机后台进行下载,文件以.log为结尾的便是)
2、打开光年日志分析工具,上传网站日志。
3、查看分析结果。主要维度有这几个:
3、审视分析成果。核心指标包括以下几方面:
(1)概览分析:各类爬虫的总捕获量、总逗留时长、总浏览次数。
如何实施网站日志解析
1、获取网站日志:
步骤如下:主机独立管理面板——网站情报分析模块——网站日志——下载WebLog日志——右键点击浏览,链接另存为
在主机独立管理面板中,定位到网站情报分析模块,即可找到网站日志,点击下载WebLog日志,可以查看最近几天的网站日志,然而点击浏览进去,会发现是一堆难以理解的代码,无需担忧,我们暂时不要深入查看,而是右键点击浏览,链接另存为,下载网站日志。
——
2、若代码难以理解,可以使用光年日志解析软件GnAnalyzer,这是一款有助于我们进行网站日志解析的软件。例如蜘蛛抓取的情况,日志中均有体现。
——
3、光年日志解析软件的使用:
下载好网站日志后,即可运用光年日志解析软件进行网站日志的解析。
步骤如下:光年日志解析软件文件夹中的GnAnalyzer.exe——文件菜单,创建任务——添加(类型选择所有文件)——下一步,保存——立即解析
——
4、网站日志解析:
立即解析后,即可查看当天的:蜘蛛解析(概要解析、目录抓取、页面抓取、IP排行);搜索引擎解析(关键字解析);状态码解析(用户状态码、蜘蛛状态码)的相关信息。
文章参考自www.bjtcliuyan.com