以下是如何使用 noindex 标签阻止搜索索引。 但是，这无助于浪费抓取预算，因为机器人仍会进入页面。它也无助于链接资产的分配，因为具有 noindex 标签的特定页面仍将接收链接资产。 规范化 使用规范标签可以帮助您让 Google 知道您有一个首选页面，他们应该对其进行索引和排名，并且该页面内容的所有其他类似版本仅是首选页面的重复项，不应对其进行索引和排名。 您可以使用规范标签来解决重复内容的问题，链接资产将合并到您的首选页面。但是，机器人仍然能够抓取页面 – 这将浪费您的抓取预算。 机器人.txt 禁止网站的某些部分可能会带来很好的结果。
这是在创建更好的多面导航的同时
它简单、快速且可靠。执行此操作的最佳方 俄罗斯数据 法是设置自定义参数来指定要阻止的所有不同的构面和过滤器组合（例如“noidx-2”）。然后，您可以将其合并到要阻止的每个 URL 的末尾，或者可以在标头中使用元机器人 noindex 标记来设置要阻止的页面。然后，您可以将不允许的自定义参数输入到robots.txt文件中。它看起来像这样： robots txt 自定义参数 需要注意的是，当您更改 URL 字符串时，您需要给搜索引擎机器人 3 到 4 周的时间来注意到这些更改，然后再使用 robots.txt 文件阻止这些 URL。 然而，这也存在一些问题。链接资产将受到限制，不允许的 URL 将无法共享其链接资产。
然后使用微数据对其进行标记
您可以使用Google Search Console告诉Google如何 克罗地亚电话号码列表 抓取您的网站，这应该只是您的最后选择。您可以这样做： 登录 Google Search Console 并单击“抓取”下拉按钮 Google 搜索控制台抓取 单击URL 参数按钮 Google 搜索控制台 URL 参数 指出每个参数对页面的影响以及 Google 应如何处理这些页面 请务必记住，这仅适用于 Googlebot，因此不适用于 Bing 和 Yahoo。 分面导航最佳实践 分面导航最佳实践 以下是一些可以帮助您创建正确的分面导航的最佳实践： 使用 AJAX 当类别或过滤器页面没有内容（无产品或缺货）时，删除或阻止链接 允许对具有大量搜索流量的某些方面组合建立索引 通过类别和子类别中的面包屑设置网站层次结构，将索引属性从组件页面合并到整个系列 要点 上述任何一种解决方案都绝不是最好的解决方案。
