禁止使用robots.txt特定域名结尾

Question

我想禁止使用robots.txt 从我的网站索引所有域名结尾（co.uk，in，pl，de，nl ...等），但只允许使用com -ending。

我没有物理访问htaccess文件（受影响的是blogger.com博客），否则我只会将所有结局重定向到如意的。但是虽然我无法重定向，但我甚至想要禁止所有结局，除了.com。

当然，我可以创建一个包含所有结尾的列表并逐一禁止它们，但在我看来，这个问题必须有一个更聪明的解决方案，到目前为止我还没有找到。

怎么做？

Answer 1

回答为所有人寻找：

1. 问题无法通过robots.txt解决。

2. 但Blogger的默认模板（和其他做得好的模板）包含一个 rel="canonical"标记，指向带有“主要”的网址 域名结尾并以这种方式找出问题所在 来自具有所有其他域名结尾的域的重复内容。