我想问你一个问题......
我有一个域名kiosban.com和store.kiosban.com ..
我想禁止
store.kiosban.com/template/*
我的商店里有这个.kiosban.com/robots.txt
但是,当我查看健康菜单上的Google网站管理员工具时,>>阻止了网址,我得到了
robots.txt file Blocked URLs Downloaded Status
http://www.store.kiosban.com/robots.txt - Never
我做错了吗?
答案 0 :(得分:0)
www.store.kiosban.com
和store.kiosban.com
是不同的主机。您应该在两台主机上提供robots.txt,甚至更好,301将一个表单重定向到另一个表单。
但在您的情况下,这似乎不是问题。看起来Google只需要一些时间来抓取您的网站。它的robots.txt。