这几天再查看网站日志的时候发现了一个很奇怪的现象,大部分站长都会有日志分析的习惯,一般国内是以百度与Google这两大搜索引擎。在检查日志时出现了几个陌生的百度蜘蛛IP号段,哈哈!你猜对了,这就是传说中的百度伪蜘蛛,有人会奇怪怎么蜘蛛还有真伪吗?是的今天就来聊聊这个真伪百度蜘蛛。
在检查日志的时候发现了几个陌生的百度蜘蛛IP号段,三个IP分别是117.28.225.37、117.34.73.70、.116.55.241.24上面也标志着(BaiDu Spider) 如果不去注意分辨的话会觉的这就是百度的蜘蛛,哈!其实你错了,这个就是传说中的伪蜘蛛,查了IP这几个IP分别是福建厦门、陕西西安、云南昆明,是的这些只是我发现的百度伪蜘蛛中的几个,网络有很多的网络蜘蛛在游荡。说不定有天就光临贵站了。
在检查日志的时候发现了几个陌生的百度蜘蛛IP号段除了用IP工具来查询是否是百度蜘蛛也还有另一种方法,在运行中输入cmd后再输入nslookup+ip就可以显示出是真是伪。这样的方法会更为准确。
在运行中输入cmd后再输入nslookup+ip(如图)就可以显示出是真是伪正常百度蜘蛛的IP都是220.181.108.*或123.125.71.*号段的(顺便科普一下,这两个IP段的百度蜘蛛没有所谓高权重和降权之分)。
那么假的百度蜘蛛对于我们网站有什么危害呢?
这些假蜘蛛对于我们的网站的危害是十分巨大的,具体有以下几点:
1.占用网站带宽,导致网站流量上升,增加额外开销
2.在有限带宽的前提下,阻碍了正常蜘蛛的抓取
3.误导了我们在对网站开展SEO工作时的思路
4.部分伪装成假蜘蛛的采集工具剽窃了我们的工作
当然既然出现了这样的伪装蜘蛛,我们就必须要想办法怎么把其屏蔽了才可以,具体怎么屏蔽呢?这个还得再编辑一篇文章才能完整的来回答这个问题,所以抽空详细的来说明一下。
评论(0人参与,0条评论)
发布评论
最新评论