防止 Google 索引您的 WordPress 网站的专家方法

已发表: 2022-12-21

众所周知,Google 是领先的搜索引擎。 但有时您不希望您的 WordPress 网站出现在 Google 的搜索结果中。

那么,如何防止谷歌索引一个页面呢? 好吧,有不同的方法可以做到这一点。 但并不是所有的方式都适合每个网站。 您选择哪种方法取决于您的具体目标。 在这篇博文中,我们将探讨如何防止 Google 将网页和您的网站编入索引。 但在知道方法之前,也有必要了解人们为什么要这样做。

有时,营销人员或网站所有者会在不需要经常访问的页面上获得自然流量。 例如,感谢页面、取消页面和其他不太重要的页面。 不幸的是,它会破坏特定目标并混淆跟踪系统。 因此,如果您阻止 Google 查看这些页面,那将是有益的。 或者建议简单地取消索引。

此外,阻止特定网页的索引路径可以改善网站的搜索引擎优化。 如果您在主页上获得更多访问量,那么网站的排名就会上升。

内容隐藏
1种防止 Google 索引您的 WordPress 网站的方法
1.1编辑 Robots.Txt 文件
1.2应用谷歌站长工具
1.3应用Noindex
1.3.1元标签
1.3.2 X-Robots-Tag HTTP 标头
1.4从仪表板手动停止
1.5部分有效的方法——不使用站点地图或阻止谷歌索引它
2如何重新索引您的网站?
3结束语

防止 Google 索引您的 WordPress 网站的方法

您可以找到流行和具体的方法来阻止 Google 将 WordPress 网站编入索引。 首要任务是找到不重要的网页。 是的,我们不时包含各种类型的页面来安排或设计我们的网站。 但是,正如我们之前讨论的那样,并非所有这些实际上都需要搜索流量。

阻止谷歌索引您的网站

因此,在学习阻止 Google 索引 WordPress 的方法之前,请列出页面。 它将帮助您阻止搜索引擎临时索引这些页面。 当然,您可以稍后根据需要安排它们。 现在,让我们了解您应该遵循哪些技术来控制网站索引。

编辑 Robots.Txt 文件

编辑 robots.txt 文件有助于从搜索引擎中隐藏网页。 或者,那些使用托管服务维护站点的人可以要求他们修改它。 它是支持 Robots Exclusion Standard 的纯文本文件。 您可以在站点的根域中找到一个 robots.txt 文件。 您也可以自己编辑此文件并允许或阻止任何抓取工具列出您的域或子域。

要应用此技术:下载 robots.txt 文件的副本,对其进行编辑,然后再次将其上传到根域。 该文件可能包含一个或多个说明。 例如,您可以使用此阻止 Google 代理抓取任何 URL,

 User-agent: Googlebot Disallow: /nogooglebot/

这样,您还可以防止其他代理将页面和网站编入索引。 请记住,您必须创建名为 robots.txt 的文件。 并且您的站点必须只有一个 robots.txt 文件。 还有一些其他规则; 您可以在此处查看详细信息。

注意:请记住,您不应在 robots.txt 文件中同时使用 Disallow 和 Noindex 标签。

应用谷歌网站站长工具

该系统支持在固定时间段内阻止页面或 URL。 人们知道它作为 Google Search Console 也有助于在许多方面维护网站。 您可以使用其删除 URL 工具轻松阻止 Google 将您的网站编入索引。要应用该方法,请检查以下内容 -

  • 检查您的网址是否位于 Search Console 属性中。
  • 选择暂时隐藏并添加页面 URL。
  • 接下来,选择从缓存中清除 URL 并将其从搜索中删除。 您可以轻松复制和粘贴页面 URL。 但是,有时,一些嵌套的页面 URL 可能会混淆该过程。 例如,多个帖子的 URL 可能指向同一个页面,例如 -
 http://www.example.com/greenery/thread/007 http://www.example.com/greenery/post/156 http://www.example.com/greenery/thread/007?post=156

解决方案是您必须提交额外的删除请求。 对于您看到的每个内容,您都将提交删除请求。

注意:不要忘记这是一种临时页面阻止方法。 它只持续大约六个月。

应用无索引

您可以通过两种方式应用此方法。 首先,学习下面的实现并根据您的方便选择任何方法。

元标签

还有两种使用元标记的方法。 要阻止大多数搜索引擎对页面进行索引,只需将以下元标记放入页面的 <head> 部分 -

 <meta name="robots" content="noindex">

如果您只想阻止 Google 网络爬虫将页面编入索引,请使用 -

 <meta name="googlebot" content="noindex">

此外,您可以通过添加nofollow 元标记来阻止页面被列出。 指定链接非常简单-

 <a href="example.html" rel="nofollow" />

此外,您可以将它添加到所有页面以防止 Google 将您的网站编入索引。

 <meta name="googlebot" content="noindex, nofollow">

X-Robots-Tag HTTP 标头

这是使用元标记的另一种方式。 您可以选择元标记或此 X-Robots-Tag。 您可以为任何 URL 选择一个 X-Robots-Tag 作为 HTTP 标头的指令。 使用这个简单的方法,您实际上可以阻止谷歌索引非 html 文件。 图片、视频、PDF 等文件是非 HTML 文件。 robots 元标记的指令也适用于 X-Robots-Tag。 X-Robots-Tag HTTP 标头可以有noindex 或 none指令,看起来像这样,

 HTTP/1.1 200 OK Date: Wed, 14 August 2022 20:42:40 GMT (…) X-Robots-Tag: noindex (…)

如果您不希望 Google 生成缓存页面,请应用此代码noarchive X-Robots-Tag 和 unavailable_after X-Robots-Tag。

 HTTP/1.1 200 OK Date: Wed, 14 August 2022 20:42:40 GMT (…) X-Robots-Tag: noarchive X-Robots-Tag: unavailable_after: 25 Jun 2010 15:00:00 PST (…)

同样,您可以为一组 X-Robots-Tag 设置条件以使页面可见。 它可以适用于不同的搜索引擎。

从仪表板手动停止

许多人不知道也可以通过 WordPress 仪表板阻止搜索引擎对网站进行排名。 也许,你们中的许多人看到了这个选项,但并不完全了解它的用途。 例如,如果您的网站是新网站,您有很多最后一刻的任务要完成并且需要时间。 在这种情况下,您不希望搜索引擎列出该站点。 所以,这个方法很适合你。

访问您的仪表板:设置 → 阅读 → 查找搜索引擎可见性 → 勾选复选框

您可以从您的 WordPress 仪表板停止谷歌索引您的网站。

这个小任务可以使您的内容保密。 它实际上修改了 robots.txt 文件,有时还会在标题中添加相关的元标记。 因此,选中该框可防止 Google 识别该站点。

注意:人们在上线网站时常常忘记取消选中该框。 长时间不选中此框将使该网站对 Google 不可见,并且永远不会排名。

部分有效的方法 - 不使用站点地图或阻止谷歌索引它

站点地图可帮助 Googlebot 识别页面并对 WordPress 网站进行排名。 它包含站点的所有页面的 URL。 此外,在搜索引擎抓取过程中,站点地图有助于找到新页面。 因此,搜索引擎丢失任何内容的可能性很小。 如果您希望搜索引擎在一段时间内忽略您的新网站,请不要添加 XML_sitemap。

但是,站点地图并不能保证 Google 总是会索引所有页面。 这也取决于其他各种因素。 但是,您可以通过不使用站点地图来减慢搜索引擎索引过程。

同样,如果您已经包含一个或多个 XML_sitemaps,您可以阻止 Google 索引这些文件。 您可以使用插件并编辑站点的 .htaccess 文件。

使用插件来阻止谷歌索引站点地图 -今天有不同的 SEO 插件。 有些具有站点地图索引选项,例如 Yoast SEO、Rank Math 等。 如果您的站点有一个 SEO 插件,您可以找到该选项并将其关闭。 请参阅下面的示例,

您可以使用插件来阻止谷歌将您的网站编入索引。

编辑 .htaccess 文件以防止 Google 索引站点地图 -您只需通过配置文件将 X-Robots-Tag 添加到您站点的 HTTP 响应中。 您可以使用X-Robots-Tag: noindex停止谷歌索引站点地图。

对于一个站点地图文件,代码是,

 <IfModule mod_rewrite.c> <Files sitemap.xml> Header set X-Robots-Tag "noindex" </Files> </IfModule>

对于多个站点地图文件,代码是,

 <IfModule mod_rewrite.c> <Files ~ "^(sitemap1|sitemap2|sitemap3)\\.xml$"> Header set X-Robots-Tag "noindex" </Files> </IfModule>

现在,谷歌或其他搜索引擎将找不到 XML_sitemaps 并为其编制索引。 由于站点地图包含所有网页的 URL,因此将其隐藏在搜索引擎之外将有助于避免将网站编入索引。

通过在 WordPress 网站上实施 307 重定向来定期维护网站!

如何重新索引您的网站?

重建索引对于在 Google 中对您的 WordPress 网站进行排名很重要。

好吧,您不能忽视 WordPress 网站的 Google 排名的重要性。 您必须宣传您的网站并吸引新的流量。 因此,在完成剩余的网站建设任务并阻止谷歌索引某些网页后,您需要进行搜索引擎优化。 良好的 SEO 意味着对网页进行索引和重新索引。

  1. 取消选中仪表板中的搜索引擎可见性框
  2. 如果您错误地将任何Noindex 命令和 Robots.txt 块添加到任何重要页面,请检查站点的根目录。
  3. 如果您有意识地向机器人添加了不索引内容或页面的指令,现在想要重新索引,请仔细重复第二点。
  4. 将 XML_sitemap 添加到您的 WordPress 网站。
  5. 如果您使用插件来阻止 Google 将您的站点地图编入索引,请将其卸载或仅打开XML_sitemap 索引选项。
  6. Google Search Console 有一个 URL 检查工具。 您可以使用它生成一个整体 URL 报告来检查 Google 看到的内容。 在这里,您可以检查特定的 URL,也可以提交 URL,并向 Google 请求索引。
  7. 最后,为重新索引的页面定期进行良好的搜索引擎优化,并增加网站的整体流量。

您知道为什么人们有时需要删除页面标题吗?

看这里在 WordPress 中删除页面标题

结束语

这些是防止 Google 将您的网站编入索引的一些方法。 明智地选择您的方法并将其应用于您的 WordPress 网站。 然而,一般来说,网站所有者很难为他们的网站编制索引。 人们不明白太多的 SEO 是不好的,他们不能过火。 许多人甚至不知道取消索引页面的重要性和原因。 事实上,您有时应该阻止搜索引擎为您的网站编制索引以获得更多流量。 然而,这篇文章都是关于索引、取消索引和重新索引网页的。 希望你能了解主要事实并相应地应用它们。