或者

什么是页面去重

作者:奋青 浏览:90 发布时间:2018-04-27
分享 评论 0

  搜索引擎优化中,网站内部优化至关重要,其中网站内部还需要注意页面的重复。即:同一篇文章经常会重复出现在同一个网站的不同网址上。


  搜索引擎并不喜欢这种重复性的内容。用户搜索时,如果在前两页看到的都是来自不同网站的同一篇文章,用户体验就太差了。虽然都是内容相关的。搜索引擎希望只返回相同文章中的一篇,所以在进行索引前还需要识别和删除重复内容,这个过程就成为“优化去重”。


  去重的基本方法是对页面特征关键词计算指纹,也就是说从页面主题内容中选取最有代表性的一部分关键词(经常是出现频率最高的关键词),然后计算这些关键词的数字指纹。这里的关键词选取是在分词,去停止词,消噪之后。实验表明,通常选取10个特征关键词就可以达到比较高的计算准确性,再选取更多词对去重准确性提高的贡献也就不大了。


  典型的指纹计算方法如MD5算法(信息摘要算法第五版)和Rabin指纹计算方法等。这类指纹算法的特点是,输入(特征关键词)有任何微小的变化,都会导致计算出的指纹有很大差距。


  了解了搜索引擎的去重算法,SEO人员就应该知道简单地增加“的”“地”“得”,调换段落顺序 还有的甚至是直接将文字替换这种所谓伪原创,并不能逃过搜索引擎的去重算法,因为这样的操作无法改变文章的特征关键词。而且所搜引擎的去重算法很可能不止于页面级别(页面权重),而是进行到段落级别,混合不同文章、交叉调换段落顺序也不能使转载和抄袭变成原创。