这是否有任何元标记?我一直在谷歌索引我的登录和注册页面。我尝试在robots.txt中添加一些内容,但似乎暂时没有检查过。只是想确定并添加元标记(如果有)。
谢谢,
答案 0 :(得分:2)
您正在寻找robots.txt条目,而不是元标记。然后,您可以排除明确的资源路径,即:
# robots.txt for http://www.example.com/
User-agent: *
Disallow: /login.html
Disallow: /register.html
将此文本添加到名为“robots.txt”的文件中,并将其放在网站的根目录中。
答案 1 :(得分:1)
<META NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW">
会导致页面无法编入索引,并且搜寻器不会跟随链接。
但是,它取决于搜索引擎的算法,以决定是否会按照您的意图使用此信息。此meta标签或robots.txt
无法保证