如何“合并”页面“\ Default.aspx”和“\”?

时间:2010-03-24 17:51:40

标签: web-crawler robots.txt

我们的网站是在ASP.NET中开发的。我们想要阻止Google和其他搜索引擎的Default.aspx页面。我们如何“关闭”Default.aspx页面以使其无法访问? 或者是否有其他方法可以解决问题,以便我们不会创建重复的内容。

2 个答案:

答案 0 :(得分:2)

我个人认为你不必担心这个......但

您可以指定规范元标记

http://googlewebmastercentral.blogspot.com/2009/02/specify-your-canonical.html

所以在default.aspx地方的头部

<link rel="canonical" href="http://www.yourdomain.com/" />

或者你可以使用url-rewriting设置301永久重定向,使default.aspx重定向到/

答案 1 :(得分:0)

查看robots.txt,可用于停止网页抓取工具。 (至少是好的。)