我需要对我的问题做一些解释。
已添加标题的示例
<meta name="robots" content="noindex, nofollow" />
我应该再次在标题中添加规范标记吗？
<link rel=”canonical” href=”http://www.example.com/product.php?item=big-fish” />
让我知道:)。
更新
我们知道规范标签目前也受谷歌，雅虎和实时搜索的支持。 noindex和nofollow怎么样？雅虎和live（bing）也支持吗？
答案 0 :(得分：11)
Google，Yahoo!和Bing (Live)支持noindex和nofollow。
noindex告诉搜索引擎不要费心缓存您的网页以包含在他们的搜索结果中。
nofollow告诉他们您不希望遵循页面上的任何链接。
在同一页面上添加canonical标签不会受到影响，但除非您与其中一位搜索工程师交谈，否则效果不明。
答案 1 :(得分：6)
没有多大意义？搜索引擎无论如何都不会为你的页面编制索引！
虽然我想如果您将来希望将其编入索引，那么这将是一种很好的做法，但前提是只有通过不同的URL访问相同的页面内容。
答案 2 :(得分：4)
只是一劳永逸地澄清一些事情
实施此
<meta name="robots" content="noindex, nofollow" />
不仅告诉机器人不对页面编制索引，而且阻止它们在页面上找到的链接中传递PageRank。但这本身并不是问题。问题是这些页面变成死胡同，否则称为“悬空页面”或“节点”，这会导致稀释的PageRank，因为汁液将从PR图中删除。
也就是说，最佳元将实现：
<meta name="robots" content="noindex,noarchive,nosnippet,follow" />
如果该页面是重复的，那么最好实现规范标记，链接到您想要编入索引的页面版本。如果没有，至少到最相关的页面。
单独使用规范标记不会阻止索引编制。至少在所有情况下都不是。例如，如果页面的PR5具有指向具有PR 1的相同页面的规范链接，则Google可以忽略规范标记并使用PR 5索引该页面。
因此，为了避免任何误解，规范标记不是301重定向。也就是说，带有规范标签的页面仍然可以累积PageRank。这取决于多少果汁到达那个页面。
另外，另一个理由是将“跟随”元机器人指令添加到最后。
根据谷歌网络垃圾邮件团队负责人马特·卡茨（Matt Cutts）的说法，只是使用“noindex”或“noindex，noarchive，nosnippet”而不添加“跟随”指令，可能是因为Googlebot可能会陷入困境而不是遵循该页面上的链接。
我希望以上所有有帮助！
答案 3 :(得分：3)
由于你告诉抓取工具没有索引而不遵循，我不明白为什么你应该使用规范。
只有在不同网址下拥有相同内容时，才应使用规范。
答案 4 :(得分：3)
Robots.txt文件中包含的页面告诉搜索引擎不要抓取这些页面。但是，Matt Cutts说，Robots.txt文件中的页面仍然可以累积PageRank，并且可以在搜索结果中编入索引。
NoIndex标记表示搜索引擎可以抓取页面并为其提供PageRank，但搜索引擎不会对页面编制索引，也不会显示在搜索结果中。同样，具有NoIndex标记的页面可以累积PageRank，因为链接仍然从NoIndex页面向外跟踪。
带有NoFollow标记的页面告诉搜索引擎是，可以抓取此页面，但不要在Google的索引中显示此页面，也不要关注任何外向链接，也不会有任何PageRank流页。
答案 5 :(得分：1)
如果有多种方式来处理网页，则只需要“规范”标记。例如，如果“http://www.example.com/products/big-fish”和“http://www.example.com/product.php?item=big-fish”都指向同一页面（即一个是另一个的别名），请使用“canonical”。
答案 6 :(得分：1)
与此同时，Google员工已经回答了这一问题，请点击此处：http://www.google.com/support/forum/p/Webmasters/thread?tid=79b4544fb7e1cb3c&hl=en
基本上使用noindex或canonical。
答案 7 :(得分：0)
Eric Enge＆amp ;;总结SEO的艺术。 Co book，加上谷歌搜索文章和论坛，我建议如下。基本上我们也假设您的网站使用规范链接来逃避重复页面问题，并且从搜索引擎的角度来看，所有其他带有cgi参数的页面网址都被视为不需要的页面（虽然功能齐全且可供访问者使用）。
CANONICAL URL PAGES - 产品，信息，文章除了非规范链接（不需要的页面）之外，还允许其他所有内容。这样做，我们给他们没有果汁，没有评级奖金。其他页面也没有从中受益。但我们会将不需要的网页评分降低，搜索结果中的有用网页会更高。
＆LT; a href =“mysite.com/catalogue/product.php?id=123”rel =“NoFollow”＆gt;
重复页面 - 产品，打印搜索引擎读取页面代码，在最开始时标识规范链接，将其视为有用页面的等效项，并将其从索引中排除为不需要的页面。 SE机器人已经阅读了页面，因此它仍然可以检查链接。因此，我们禁止使用非规范网址跟踪其他不需要的网页上的链接。为了使这个页面更接近其规范目标，我们省略了其他禁止参数（规范标记就足够了）。
＆LT; link rel =“canonical”href =“mysite.com/catalogue/my-product/”＆gt;
＆LT; a href =“mysite.com/catalogue/product.php?id=123”rel =“NoFollow”＆gt;
技术页面 - 注册，篮子，订单禁止阅读所有这些页面的机器人甚至无法访问页面代码中的任何标签。但访问者仍然可以访问这些网页，机器人会在其网站上的不需要的网页上找到链接。因此，我们还需要所有禁止标记，以便搜索引擎忽略此页面，而不是关注不需要的页面上的链接。
禁止：/catalogue/product.*＃在robots.txt文件中。
＆LT; meta name =“robots”content =“noindex，noarchive，nocache，nosnippet”/＆gt;
＆LT; a href =“mysite.com/catalogue/product.php?id=123”rel =“NoFollow”＆gt;
答案 8 :(得分：0)
“在索引页面上，使用Canonical关键字。在非索引页面上，使用NoIndex。”
https://helloacm.com/the-golden-rules-of-removing-duplicate-pages-by-using-noindex-or-canonical/