标签: search-engine web-crawler robots.txt
当搜索引擎抓取网站时,此行阻止了什么?
禁止:/?s
答案 0 :(得分:1)
它会阻止机器人抓取他们在其查询字符串中包含s时偶然发现的任何网址(在根目录(?)中)。
s