我注意到在谷歌的网站管理员工具中，我有两条记录显示我有意想不到的重复内容。
它显然正在发生，因为谷歌已经抓取并索引了我的类别和档案，尽管我没有可见的链接（我知道）。
我想阻止这些项目被抓取和编入索引，但是如何？
以下是Google网站管理员工具显示的两条记录....
/ 2009/10 / /类别/测试/
答案 0 :(得分：1)
控制蜘蛛访问的一种方法当然是手动创建（或修改）robots.txt文件。
然而，对于Wordpress，使用插件可能更有意义，例如Google Sitemap Generator或更多SEO-geared All in One SEO Pack
答案 1 :(得分：0)
您可以在header.php文件中添加if语句
<?php
if(is_archive) {
?>
<META NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW">
<?php } ?>
谷歌应该尊重这一点。 is_archive条件也涵盖了类别 - http://codex.wordpress.org/Conditional_Tags#Any_Archive_Page