从Google搜索结果中移除机器人txt文件

Question

早上好，每个人

我的网站在WordPress中，最初我购买了SSL证书并使用https版本在谷歌搜索结果中显示。

但是由于https我看到了一个问题，我的流量减少了，所以为了增加我的流量，我计划在谷歌搜索结果中显示http版本，使用下面的代码

RewriteOptions inherit
RewriteEngine On

RewriteCond %{HTTPS} on
RewriteRule (.*) http://%{HTTP_HOST}%{REQUEST_URI} [R=301,L]

一段时间后，我的所有https网址都从Google搜索结果中移除，并且所有http网址都在Google搜索结果中编入索引。

但我仍面临一个问题，即我的机器人txt网址仍会出现在谷歌搜索结果中，如下所示。

https://yourdomain.com/robots.txt

和

http://yourdomain/robots.txt

使用我已经显示的上述代码将我的https版本301重定向到http。

但上述两个网址仍显示在谷歌搜索结果中，谷歌显示重复内容问题。

任何人都可以向我展示从谷歌搜索结果中删除https robots txt文件的技巧。

感谢

Answer 1

您可以在网站根目录中嵌入此规则.htaccess **在RewriteEngine On行下方为robots.txt请求投放404：

RewriteEngine On

RewriteRule ^robots\.txt$ - [L,R=404,NC]