Google Search Console 警告“已编入索引,尽管遭到 robots.txt 屏蔽” 的处理方案

在《WordPress 屏蔽恶意搜索,防止被搜索引擎收录恶意搜索结果》中,提到了网站被恶意搜索攻击,已经给出了一些处理方案,但是最近查看 Google Search Console 的覆盖率,看到了“已编入索引,尽管遭到 robots.txt 屏蔽”的警告,一看具体的网址,几万条全部都是恶意搜索结果。

Google Search Console 警告“已编入索引,尽管遭到 robots.txt 屏蔽” 的处理方案

查看了google官方文档《已编入索引,但被 robots.txt 屏蔽了》,了解到通过 robots.txt 并不能阻止Google索引恶意搜索结果:

Google Search Console 警告“已编入索引,尽管遭到 robots.txt 屏蔽” 的处理方案
Google Search Console 警告“已编入索引,尽管遭到 robots.txt 屏蔽” 的处理方案

而是需要通过使用“noindex”阻止搜索引擎编入索引

Google Search Console 警告“已编入索引,尽管遭到 robots.txt 屏蔽” 的处理方案

重要提示:为让 noindex 指令生效,网页不得被 robots.txt 文件屏蔽,并且必须能被抓取工具访问。如果该网页被 robots.txt 文件屏蔽或抓取工具无法访问该网页,那么抓取工具将永远无法看到 noindex 指令,因此该网页可能仍会显示在搜索结果中,例如,如果有其他网页链接到该网页的话。

我们不能在 robots.txt 屏蔽google蜘蛛访问搜索结果网址,但是倡萌并不清楚百度等其他搜索引擎是否会遵循 noindex 指令,所以我们在 robots.txt 中允许谷歌蜘蛛抓取搜索结果页面,但是禁止其他搜索引擎抓取。

Google Search Console 警告“已编入索引,尽管遭到 robots.txt 屏蔽” 的处理方案

按照《WordPress 屏蔽恶意搜索,防止被搜索引擎收录恶意搜索结果》 处理过的恶意搜索结果页面,会返回404状态码,并且源码中包含了 <meta name="robots" content="noindex">

Google Search Console 警告“已编入索引,尽管遭到 robots.txt 屏蔽” 的处理方案

这样一来,google蜘蛛就可以读取到该指令,不再索引被屏蔽关键词的恶意搜索结果页面。

以上步骤处理完以后,在 Google Search Console 覆盖率的警告界面,提交验证,然后耐心等待处理。

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 lk2768783601@gmail.com 举报,一经查实,本站将立刻删除。

(0)
上一篇 2023年9月6日 下午12:36
下一篇 2023年9月6日 下午12:43

相关推荐

  • 网站进入Google网址黑名单的解决办法

    当网站存在某些安全问题的时候,很可能会被谷歌添加到黑名单。如果您的网站最终出现在Google网址黑名单中,那么您可能会看到对网站访问量和整体网站性能的巨大负面影响。 幸运的是,我们整理了这篇文章,为您提供一些所需的信息,以防止您的网站进入谷歌网站黑名单,如果不幸的话,将其删除。 什么是网址黑名单 网址黑名单是由他们认为可疑或危险的搜索引擎收集的网址的集合。 …

    2023年8月9日
    1080
  • WordPress入门 之 WordPress基本设置

    文本是《WordPress 入门教程(共19篇)》专题的第 4 篇。阅读本文前,建议先阅读前面的文章: 前面说了 如何安装WordPress,接下来我们需要快速熟悉WordPress,以及进行一些必要的基本设置。 开始设置之前,建议大家先点击一篇左边菜单栏的每一个选项,看看到底是做什么用的。下面开始说一下一个新的WordPress站点应该要进行的一些最基本的…

    2023年8月29日
    890
  • 让WordPress按需生成缩略图,禁止自动生成多余的缩略图

    默认情况下,WordPress会为上传的每张图片至少生成5种不同尺寸的缩略图,而有些主题注册了多种缩略图尺寸,这将导致每张图片可能会生成10+个缩略图!! 今天将告诉大家,如何禁止WordPress自动对所有上传的图片生成缩略图,仅让它对真正需要显示缩略图的图片进行生成。这个方法经过倡萌长时间的测试,效果非常棒! 禁用不需要的缩略图尺寸 对于小白用户来说,使…

    2023年9月6日
    1530
  • 如何禁用WordPress 5.5+自带的XML站点地图

    WordPress 5.5 的一项主要的新功能就是自带了XML站点地图(XML SiteMap),但是很多网站此前都采用了第三方插件(比如 Google XML Sitemaps、Yoast SEO、All in One SEO Pack)来生成网站地图。这就出现了到底是选择自带的XML站点地图功能,还是继续采用第三方插件的问题。 其实,对于大多数的站点来说…

    wordpress 2023年9月5日
    1060
  • 全站编辑才是 WordPress 的未来,你怎么看?

    全站编辑 (Full Site Editing,简称 FSE) 是 WordPress Gutenberg 发展的下一步,自从 WordPress 5.9 一起发布全编辑的初始版本以来,备受争议!直到目前,全站编辑作为 WordPress 的一个相对较新的功能还处于起步阶段。 “全站编辑将改变每个人使用主题的方式——以及我们构建主题的方式。” 资料来源:Fu…

    2023年8月29日
    950
关注微信