标签：重复 多少 删除 href 带来 角度 效率 相关 访问
网站日志能给seo带来很多意想不到的数据情况，通过分析这些数据可以使优化变得更为主动。网站日志对蜘蛛和访客的浏览情况的提供了详细数据。通过分析相关参考数据，可以对蜘蛛行为及网站有更清晰的认识，并且能够提供相应优化方案。从不同角度分析可以得出不同结论，比如从蜘蛛行为角度，我们可以看出蜘蛛的浏览行为，包括蜘蛛停留时间长短、抓取量多少、返回码、唯一抓取量和重复抓取率等。这几个数据对于网站优化能提供如下帮助：
一、理论上抓取量的提升可以提高收录的机率，而抓取量的下降或整体数量不高，就需要查看网站构架是否合理，页面能否访问，优先在结构上进行优化。
二、页面停留时间可以看出蜘蛛在爬行一个页面时所花的时间是否合理，时间长短没有绝对的好坏之分，只能进行相关参考。
例如停留时间长可能代表站点质量高，但也可能代表网页较大或打开速度慢，而时间短也可能证明页面小或者服务器带宽高。
三、重复抓取对收录并没有提升的效果，重复率越高，对蜘蛛的浪费越大，这时需要避免过多的重复页面，用robots限制无效页面。
提升唯一抓取量能保证蜘蛛效率最大化。
四、蜘蛛返回码可以说明一个页面被查看的情况，是200正常状态、重定向的301状态还是404页面不存在等异常状态。
尤其是404状态，需要及时查明原因，页面是否已被删除，或者页面对网站有没有价值等，通过robots进行屏蔽。
死链对于网站的影响是很大的，尤其网站有许多隐形死链，我们需要告诉蜘蛛，网站的页面是能够打开的，这样才能提升权重。
标签：重复 多少 删除 href 带来 角度 效率 相关 访问
原文地址：http://blog.51cto.com/jeecool/2313246
