网站日志可以很好的记录访客和蜘蛛的访问情况，通过网站日志可以很好的了解网站的一些状况，这也是为什么现在很多SEO都会去分析网站日志的原因，但是分析网站日志的人不一定完全了解网站日志，下面我就浅谈一下网站日志里的秘密。

　　分析网站日志当然需要网站日志分析器，当然现在很多人使用免费的网站日志分析器，但是这些网站日志分析器分析出来的东西很有限，所以说很多网站信息也就被影藏了，下面我就以那种付费的网站日志分析器来阐述。

　　大家通过普通日志分析器一般都是看有没蜘蛛来过，什么蜘蛛，访问时间，访问哪些了页面、访问次数及返回的状态码，如下图1，而更专业的日志分析器能够知道蜘蛛来的次数，还知道蜘蛛总停留时间、总抓取量，如图2，

　　通过公式得出蜘蛛每次来抓取页数=总抓去量/ 蜘蛛来的次数，从而知道蜘蛛抓取的深度，是不是网站结构太深，抓取深度不高的话，会造成很多层级很深的页面不会被抓取到;以及造成少数页面被反反复复在抓取，浪费了爬虫的时间。这样，很多网站想要在百度上获得收录就成了问题。

　　通过公式得出蜘蛛每页停留时间=蜘蛛总停留时间/总抓取量 ，从而知道网页加载速度及是服务器响应速度大概什么情况，是不是要优化网页代码和优化硬件设施。大家都知道网页加载速度也是对网站排名有关。

　　还告诉大家一个秘密，有些蜘蛛来访问网站时是不带User-agent,就像是康熙微服私访一样，这样做的目的是什么，大家自己想吧，然而怎么判断这个IP是那个蜘蛛的呢，大家可以tracertIP地址就知道是什么蜘蛛了。

　　好了，今天就到此结束吧，希望可以帮到大家，本文由http://www.hzht007.com站长编写，转载请保留，不要像昨天的文章“从网站流量统计图引发的推广方面的深思”被人转载了N多，并且改了连接，务必请大家尊重版权。