我的搜索结果会为Google上的所有网站编制索引。我只想索引主页而不是/ nl /,/ en /和/ fr / 我怎样才能在robots.txt中阻止这种情况?
我用过
Disallow: /nl/
Disallow: /fr/
Disallow: /en/
但是我的站点地图与网址www.eikhoeve.be/nl/sitemap.xml有什么关系?我如何允许这个用于我的Google网站管理员工具?
答案 0 :(得分:0)
您可以使用Allow
关键字来访问不允许目录中的网址。
Allow: /nl/sitemap.xml
Disallow: /nl/