或者

百度蜘蛛抓取频次准则及调整办法

作者:9527 浏览:57 发布时间:2017-12-04
分享 评论 0

  百度蜘蛛是根据网站设置的协议对站点页面进行抓取,但是不可能做到对所有站点一视同仁,会综合考虑站点实际情况确定一个抓取配额,每天定量抓取站点内容,即我们常说的抓取频次。那么百度搜索引擎是根据什么指标来确定对一个网站的抓取频次的呢,主要指标有四个:


  1,网站更新频率:你网站更新的速度快那么蜘蛛就会经常来抓取,反之如果更新的慢蜘蛛就会来的少。所以网站更新频率直接影响百度蜘蛛来访频率。


  2,网站更新质量:网站更新频率提高了还不行,这仅仅是提高蜘蛛的来访次数并不代表页面就会被收录,百度蜘蛛对页面质量也是有严格要求的,如果你的网站每天更新的内容被蜘蛛判定为垃圾内容或者质量不高,那也是没有意义的。


  3,连通度:网站应该安全稳定、保持畅通,能够使蜘蛛能够正常抓取,经常给Baiduspider吃闭门羹可不是好事情。


  4,站点评价:百度搜索引擎对每个站点都会有一个评价,这个评价是根据很多因素来决定的,而且这个评价会根据网站的情况不断变化,是百度对站点的一个基础打分(绝非外界所说的百度权重),是百度内部一个非常机密的数据。站点评级从不独立使用,会配合其它因子和阈值一起共同影响对网站的抓取和排序。


  抓取频次间接决定着网站有多少页面有可能被建库收录,抓取频次如果不符合站长预期该如何调整呢?百度站长平台提供了抓取频次工具.该工具除了提供抓取统计数据外,还提供“频次调整”功能,站长根据实际情况向百度站长平台提出希望Baiduspider增加来访或减少来访的请求,工具会根据站长的意愿和实际情况进行调整。