禁止使用robots.txt的子域名网址

时间:2013-04-16 02:41:19

标签: subdomain robots.txt

我想问你一个问题......

我有一个域名kiosban.com和store.kiosban.com ..

我想禁止

store.kiosban.com/template/*

我的商店里有这个.kiosban.com/robots.txt

但是,当我查看健康菜单上的Google网站管理员工具时,>>阻止了网址,我得到了

robots.txt file                         Blocked URLs    Downloaded  Status
http://www.store.kiosban.com/robots.txt -             Never 

我做错了吗?

1 个答案:

答案 0 :(得分:0)

www.store.kiosban.comstore.kiosban.com是不同的主机。您应该在两台主机上提供robots.txt,甚至更好,301将一个表单重定向到另一个表单。

但在您的情况下,这似乎不是问题。看起来Google只需要一些时间来抓取您的网站。它的robots.txt。