为了避免在出现重复内容时使搜索引擎机器人的任务变得困难，Google 建议：
合并链接代码。允许搜索引擎将每个 URL 可用的信息（例如指向它们的链接）合并到单个首选 URL 中是有利的。
监控单个产品或主题的指标。通过使用多个 URL，获取特定文章的综合指标会变得更加困难。
确定用户应该看到的 URL。
管理联合内容。如果您分发要在其他域上发布的内容，建议您将页面排名与您的首选 URL 合并。
设置首选域。首选域或规范域是我们希望搜索引擎索引的域。链接可以使用 www 或非 www 版本的 URL 定向到您的网站。
使用 rel=”canonical” 链接元素指示首选 URL。使用 rel=”canonical” 链接 人力资源总监电子邮件列表 元素标记规范页面和任何其他变体。将带有 rel=»canonical» 属性的 <link> 元素添加到这些页面的 <head> 部分。
使用站点地图为相同内容设置首选 URL。站点地图是一个文件，您可以在其中列出网站的页面，以便向 Google 和其他搜索引擎通报您网站内容的组织情况。搜索引擎网络爬虫（例如 Googlebot）会读取此文件以更智能地爬网网站。
对非规范 URL使用301 重定向。服务器上的 301 重定向是确保用户和搜索引擎登陆正确页面的最佳方法。状态代码 301 表示页面已永久移动到新位置。
指示如何管理动态参数。 使用参数组织告诉Google您要忽略哪些参数。通过忽略某些参数，您可以减少索引中的重复内容，并允许 Google 更轻松地抓取您的网站。
在 HTTP 标头中指定规范链接。如果您可以配置服务器，则可以使用 rel=”canonical” HTTP 标头来指示 HTML 文档和其他文件（例如 PDF 文件）的规范 URL。