合信通如何优化并解决重复内容，从而聚合网站权重

 

当你了解哪些属于重复内容，并且通过诊断精准定位了问题页面后，最重要的就是如何优化并解决重复内容，从而聚合页面权重，提高搜索引擎爬虫对网站的抓取效率，提升有效页面收录量。

 

 

设置301重定向

 

对搜索引擎来说，301重定向意味着永久改变地址，可以传递绝大部分页面权重和排名。

 

如果一个页面拥有多个URL入口，或是新旧版本文章内容更替等情况，建议整理出我们期望收录的规范化地址，设置其他页面做301重定向到规范化页面，聚合页面权重。

 

添加rel="canonical"

 

网站所有页面都应该添加rel="canonical" link 元素，帮助Google选择一个网址作为规范版本并抓取该网址，而将所有其他网址视为重复网址并降低对这些网址的抓取频率，聚合页面权重。

 

Canonical标签不像301重定向那样可以基本完全传递原来的权重，但大部分的权重还是可以聚合于首选的页面的，前提是标识的这两个页面内容需要相同或高度相似。如果要保留所有的已有的URL均能被正常访问且不好设置301重定向，那么可以使用这种折中方案。

 

 

1)   Canonical标签只是一个建议，并不是指令，所以搜索引擎会在很大程度上考虑这个标签，但并不是百分百遵守，搜索引擎还会考虑其他情况来判断规范化地址。

 

2)   标签需要使用绝对地址。（即URL需要带上http或https协议）

 

3)   Canonical指定的首选页面的内容，与其他使用这个标签的非规范化网址内容要完全相同或高度相似，否则很可能不起作用。使用301则没有这个限制。建议站长在使用canonical标签时要仔细检查，确认两个页面是完全相同的。即使页面高度相似，canonical标签被遵守的可能性也会降低。

 

 

如果301重定向和Canonical标签都不方便设置，只希望搜索引擎不要收录那些重复页面，这种情况下可以在页面源代码中添加Noindex标签。禁止搜索引擎索引本页面，但允许蜘蛛继续抓取页面上的其他链接，也可以传递权重。如下：

 

<meta name=“robots” content=“noindex,follow”>

 

Robots.txt代表禁止抓取（但不影响索引），Noindex代表禁止索引（但不影响抓取），抓取和索引是不同的两个过程，但经验不足的人可能会倾向于阻止使用robots.txt来解决重复页面，属于治标不治本，最好将这些页面设置为noindex（或在不再需要时将其重定向）。例如网站存在一些内容缺失页面，或是网站内部搜索页面都不想被收录，可将这类页面添加Noindex标签，确认其从Google索引中去除后，再添加到robots.txt文件中，禁止爬虫抓取。

 

 

网站内部链接入口都应确保是规范化地址，即提高爬虫抓取效率，减少重复页面的抓取入口。例如首页导航的Home，网站Logo，面包屑中首页层级入口，都应统一为首选的URL。

 

 

例如电商网站的各个产品页面不要显示重复的shipping，warranty等条款，建议只用锚文本添加内链即可，链接到能够提供详细信息的单独网页。同时还需要最大限度地减少相似内容，例如网站定期发布版本更新文档，建议考虑增加每个新版本文档的独特性内容，或将这些版本网页合并成一个。

 

 

如果公司同时运营多个平台，例如产品可能会在ebay，amazon和官网上同时售卖，建议保证官网能尽量做到发布原创内容，即网站产品和分类的描述内容尽可能做到单独定制化、可读性强，提高页面的长期竞争力。如果你的产品采购于供应商，那么更需要在供应商提供的产品详情信息上进行优化，避免和其他网站信息产生重复。

 

PS：如果网站产品SKU过多，内容更新的工作将十分漫长，难以推进，建议先从GA等分析工具中筛选出Top流量的产品页面，从重点品类入手。

 

 

如果可以，网站页面URL尽量不要轻易更改，因为保持URL稳定比在URL中不断填充新的关键词更为重要。时间一长，新旧URL更替容易产生404错误或其他重复问题。

 

 

如果你运营的是一个咨询内容站点，网站拥有大量高质量文档，容易被竞争对手或其他平台所采集、引用等，建议在别人复制我们的网站内容时，设置自动添加网站版权信息和原始页面链接，确保我们内容的原创性。