常见的蜘蛛陷阱你都了解了吗？
浏览：40次
发布时间：2017-09-12
分享
评论
赞0
蜘蛛陷阱这个名词相信大多数人都听说过,这些蜘蛛陷阱会对蜘蛛程序造成障碍,如果消除这些蜘蛛陷阱,可以使蜘蛛程序收录更多的网页,那么,哪些做法不利于蜘蛛爬行和抓取?我们SEOer又应该怎么去避免这些蜘蛛陷阱呢?
一、框架结构
虽然说框架结构对网站的维护和更新有一定的方便性.但是,它不利于搜索引擎蜘蛛抓取,建议站长还是尽量不用为宜.
二、Flash
百度蜘蛛抓取一般只是HTML代码,只是一个Flash文件的链接,而没有文字内容.美则美矣,但是搜索引擎它看不到,抓取不到信息,也就无从判断他的相关性.
三、Javascript
JS有和flash差不多,同样可以吸引眼球,比如很多站长呢,就用Javascript脚本做一些导航,这种也是比较严重的蜘蛛陷阱.
四、Session ID.
网站使用Session ID跟踪用户访问,这样搜索引擎每一次访问我们的页面时出现一个不一样的Session ID,即使访问的时同一个页面,他也会出现不一样的ID,但是内容却是一样的,就形成了大量的重复性内容,这也就形成了一个蜘蛛陷阱,也不利于网站的优化.
五、动态URL.
动态URL就是指网址里面带有问号、等号以及一些参数等等.一般情况下来说,动态URL也是不利于蜘蛛抓取的,我们应该避免,比如我们可以设置下URL的伪静态化.
六、要求登录.
百度蜘蛛他不会填写用户名、密码、验证码.那么你的这些内容也就不会被他发现,容易造成蜘蛛陷阱.
看看上面的情况是否出现在你的网站之中,没有则更好,但是如果有的话,就尽量的去除掉,换成对蜘蛛友好的设计,不要为了美观而丢失了给百度的印象,拣了芝麻丢了西瓜.
猜你喜欢
评论(0人参与，0条评论)
发布评论
最新评论