在Ajax应用程序中添加Robots-Meta-Tag的效果

时间:2015-12-09 19:13:10

标签: javascript html ajax meta-tags robots.txt

关于如何使用Javascript向DOM添加<meta>标记有很多问题和答案。我对此策略与<meta name="robots" content="noindex"/>代码相关的有效性感兴趣。

  • 如果该标签创建较晚,抓取工具是否会尊重页面上的此元标记? 如何迟到了?
  • AJAX应用程序的最佳实践是哪些页面是可索引的,有些则不是? HTML只加载一次,DOM根据应用程序状态/当前页面进行修改。我已阅读了Google的documentation on the robots meta tag及其deprecation of the AJAX crawling scheme但未找到任何相关信息。
  • 有没有办法去测试&#34; googlebot对特定网址的看法是什么?

PS:我不认为这是Ajax Loaded meta Tags的副本,因为该帖现在已有五年了,答案已被弃用。

0 个答案:

没有答案