我最近在网站上添加了一项新功能,该功能使用AJAX加载登录和注册面板。
上传后我收到了大量的Google抓取错误,差不多有700个!
除了jQuery .load()函数使用的URL之外,错误URL不会出现在页面源中的任何位置。
Google是否正在尝试抓取我的JavaScript代码使用的网址?
答案 0 :(得分:2)
从Google文档中查看此页面http://support.google.com/webmasters/bin/answer.py?hl=en&answer=174993它为您提供了有关ajax以及如何防止机器人弄乱您的ajax内容的一些想法。具体来说,“如果我的网站有一些不应该被抓取的哈希片段网址,该怎么办?”问题