不要让谷歌抓取我的网站

时间:2011-04-01 10:26:07

标签: drupal seo

有没有办法从googlebots隐藏我的drupal网站?我不希望我的网站在搜索引擎中显示,但仍处于开发阶段。

6 个答案:

答案 0 :(得分:9)

使用robots.txt

答案 1 :(得分:6)

使用robots.txt阻止搜索引擎...

但是!

您需要考虑远离真实域名开发您的网站。当您上线时,您将如何开发网站的增强功能?您现在需要一个开发环境。

此外,您可以在放置网站之前构建入站链接和搜索引擎排名。在您上线之前阻止您的网站被Google编入索引将阻止这种情况发生。

我建议在您的主域上放置一个目标网页,其中包含反映您网站目的的消息,以及可能会对该网站“注册感兴趣”的功能。这样您就可以在那里获得您的域名。

启动一个新网站几乎总会发生雷鸣般的沉默。在发布之前对您的域名进行排名是一项非常有价值的活动。

答案 2 :(得分:3)

在您的网络服务器的基本目录中创建一个名为robots.txt

的文件
User-agent: *
Disallow: /

答案 3 :(得分:2)

还有一个选择是在.htaccess

中添加这样的内容
Order Deny,Allow
Deny From all
Allow From 1.2.3.4

如果站点上有多个远程位置,则只使用您的IP地址或多个IP地址。

但我在关于开发主域名的评论中排名第二。获取VPS帐户,使用虚拟主机在主域上建立启动站点,并为其创建子域和虚拟主机(并如上所示保护它),并将其用于开发。

答案 4 :(得分:1)

使用robots.txt,例如:

User-agent: *
Disallow: <directory you want to hide>

如果您愿意或者根本不使用,您可以允许搜索某些目录 不允许:/

有关robotstxt.org的更多信息: - )

戴夫

答案 5 :(得分:0)

需要登录。我不认为谷歌机器人会登录...