以上网址需要隐藏在搜索引擎中。
如果有人搜索我的mysitename,那么上面的链接也会在Google搜索中显示。我能为此做些什么?
答案 0 :(得分:6)
在您的网站根目录中添加文件robots.txt
,其中包含以下内容:
User-agent: *
Disallow: /users/download/id
这种方法基本上告诉搜索引擎不要索引/users/download/id
。
这并不意味着每个搜索引擎都会这样做,但大多数现代搜索引擎都会考虑该文件。
答案 1 :(得分:2)
你可以使用Seo技术......
您可以在HTML中添加代码,以防止机器人抓取您的网页。此代码以元标记的形式放在网页的标题中(意思是和标记之间)(您认为元标记仅用于关键字)。
以下是此代码外观的四个示例;
<meta name="robots" content="index,follow">
<meta name="robots" content="noindex,follow">
<meta name="robots" content="index,nofollow">
<meta name="robots" content="noindex,nofollow">
答案 2 :(得分:0)
<meta name="googlebot" content="noindex,nofollow,noarchive,nosnippet,noodp" />
<meta name="robots" content="noindex,nofollow,noarchive,nosnippet,noodp" />