标签: javascript server web-crawler google-crawlers
由于configure robots.txt仅会影响我的网站页面under,除了为我的外部链接添加ref="nofollow"之外,还有其他任何方法来阻止搜寻器吗?
under
ref="nofollow"