内部搜索结果页应该被索引吗？

不，大多数情况下，Google和其他搜索引擎不应为您网站的搜索结果页建立索引。

长期以来对搜索引擎进行优化的观点认为，来自站点搜索的结果页面应会阻止搜索引擎机器人，而不应包含在搜索引擎的页面索引中。

这样做的目的是避免让Google用户失望，否则将阻止搜索引擎爬网程序浪费他们的时间来下载和分析可能无法帮助访问者或您的企业的页面。

用户体验

搜索引擎希望为其用户提供良好的搜索体验。 这就是为什么Google，Bing和DuckDuckGo作为示例花费大量时间尝试正确获取搜索结果的原因。

不幸的是，您网站上的搜索结果页可能不是一个很好的相关结果。

这是一个例子。 假设有人去Google并输入“什么是重型跑步者最好的跑鞋”。

在显示的结果中，有一个来自网站的内部搜索结果。 但索引并链接的页面是搜索词“男式跑步鞋”的产品列表。

此内部搜索结果页上还有一个部分，用于宣传您公司的博客文章之一。 这是一篇提到重度跑步者并以某种方式被索引的博客文章。

此内部搜索结果页面将不是一个很好的目标页面，并且可能不应该包含在索引中。

此结果没有帮助。 使用搜索引擎的人必须单击两次（一次在Google的搜索结果上，一次在您的网站的内部结果上），以获取所需的信息。 此外，访问者可能会误解结果，并认为您的站点向他显示了一张缓冲的跑鞋清单，但在下订单后才会感到失望。

一个更糟糕的例子来自英国技术SEO专家Matt Tutt在2018年发表的一篇文章。

Tutt在文章中指出，在线零售商Wayfair允许对其动态生成的某些搜索结果页面进行索引。

如果您在Tutt撰写本文时用某个与性别相关的短语在Google上搜索“ Wayfair.com”，那么您会看到结果。

Wayfair会在其搜索页面说明中动态添加关键字，因此您在Google的SERP上看到的副本为“为最佳[与性别相关的单词]购买Wayfair”。 享受大部分商品甚至大型商品的免费送货服务。”

塔特说：“如果您足够勇敢地点击上面的SERP，您将受到欢迎”以下副本。

“ [与性相关的词]。 在Wayfair，我们希望确保您在网上购物时能找到最好的家居用品。 您搜索了[与性别有关的词]，并且此页面显示最接近的商品匹配项……”

正如Tutt指出的那样，此页面及其副本“不是您希望用户或搜索引擎作为家用家具提供者发现的那种内容。”

换句话说，许多内部搜索结果页面是自动生成的，对于在Google或其他搜索引擎上搜索的用户而言，可能不是很好的内容。

此后，Wayfair更改了搜索结果，以使对该特定关键字的搜索现在在Wayfair网站上返回“笔”，而不是原始的性别术语。

允许对动态页面进行索引意味着不知道您的公司向潜在客户展示什么样的结果。

这不是更好。 Google可能不想对您公司的内部搜索结果页进行排名，如果您愿意，您会在可能不利于公司的页面上浪费大量Googlebot的精力。

迷失在杂草中

“对于内部搜索页面，有两个方面对我们起作用。”谷歌的约翰·穆勒（John Mueller）在2018年4月的网站站长中央环聊中说。

“其中之一是，我们很容易通过爬网所有内部搜索页面而迷失在野草中。 如果基本上您网站上的任何单词都可以引至内部搜索页面，并且我们拥有所有这些潜在的内部搜索页面，并且它们都提供了内容，那么我们的系统可能会关闭并说：“哦，我们将尝试抓取所有内容内部搜索页面，因为那里可能确实有用。” 因此，从爬行的角度来看，这可能不是最佳选择。”

Googlebot为每个网站分配时间（“抓取预算”）。 除了内部搜索结果之外，您的网站上可能还有更好的页面可供爬网。

一个例外

Tutt，Mueller和其他人的确提到了该规则的一个例外：如果您将站点的内部搜索结果用于类别页面。

先进的搜索平台（例如Twiggle，阿尔戈利亚）可以生成产品类别或品牌页面。 商家可以使用同义词和反义词配置平台以传递或排除类别。

阻止搜索引擎

至少有两种方法可以告诉Google和其他搜索引擎不要为您网站的内部搜索结果页建立索引：每页顶部的noindex指令和robots.txt文件中的禁止规则。 （我在“ SEO：告诉Google不要抓取哪些页面”中解决了该主题。）

解决了商人为什么要阻止对内部搜索结果页面建立索引之后，我又回顾了10个领先的电子商务网站是如何做到的。 2020年3月9日，我检查了每个站点的robots.txt文件是否存在禁止规则，并且还查看了noindex指令的站点搜索结果。

由于它们的突出，我选择了Amazon，Walmart和Target。 我从追踪的电子商务网站列表中随机选择了其他七个。 请注意，Amazon和Best Buy并未阻止外部搜索引擎将内部搜索结果页面编入索引。 其余的8个则通过Robots.txt不允许或noindex指令进行了阻止。