隐藏来自谷歌等搜索引擎的页面（如Facebook的安全设置）

Question

我正在使用asp.net 2010，我想知道如何完全隐藏搜索引擎中的特定页面，类似于Facebook的安全设置如何设置（例如，如果我搜索我的真实姓名） ，我的fb页面现在将显示在谷歌中。

Answer 1

使用robots.txt

为了更加安全，您可以分析用户代理字符串，如果是belongs to a crawler，则返回空白页。

Answer 2

借助机器人文本，您可以隐藏搜索引擎中的特定页面。它会告诉搜索引擎蜘蛛，您的网站的哪些网页应该被编入索引以及哪些网页应该被忽略.. :)

Answer 3

如果这是一项安全措施，请不要使用robots.txt。如果你想隐藏某个页面，那么这将告诉攻击者你想要隐藏的内容。