整站优化中分析网站日志,我们要分析哪些呢?
日志分析是SEO工作重要内容之一,一般在这些情况下,我们需要做日志分析:
1、网站刚创建不久,希望看到蜘蛛是否来爬取;
2、网站收录了,但总收录量停滞不前,需要了解蜘蛛活动情况;
3、网站收录量减少了,想看看是否服务器出问题了;
4、网站首页被K了,得了解蜘蛛爬取首页的情况;
5、网站全部被k了,通过日志来了解蜘蛛最近动作;
那么,在分析日志时,我们一般分析什么?分别得出什么结论,对我们接下来的工作有什么指导意义?
从蜘蛛角度分析日志时
一般直观得,蜘蛛访问次数、蜘蛛停留时间、蜘蛛抓取量与蜘蛛返回码
可以计算得到蜘蛛平均停留时间、蜘蛛平均抓取量、蜘蛛唯一抓取量、蜘蛛重复抓取率
我们知道网站的收录与蜘蛛抓取非常相关,抓取量大说明网站页面受到蜘蛛的喜欢。所以:
1.抓取量与平均抓取量的提升与下降可以看出网站的结构情况,蜘蛛总访问量说明网站的规模
2.平均停留时间说明蜘蛛爬行一个页面花费,减少这个时间无疑对网站有重要意义
3.唯一抓取量的数据,可以分析出网站是否让蜘蛛不断爬行无效页面 是否浪费很多蜘蛛,从蜘蛛重复率也是同理,重复抓取并不能让收录量提升 而收录量与网站整体权重与排名和流量有很大关系
4.蜘蛛抓取间隔时间,这个在日志中可以看到,会从间隔时间的变化分析出网站在服务器端的问题
5.结合网站流量趋势 蜘蛛爬取趋势图大幅度减少流量是不正常的 而在不正常的情况下同时间段的蜘蛛爬行也会出现异常,如返回码是否增加、服务器是否稳定等等。
6.网页加载速度的提升会减少蜘蛛平均停留时间,增加平均抓取量
7.还有一点搜索引擎在更新时,蜘蛛会出现异常,比如算法更新时,蜘蛛总访问还是不断增加的