网页在加载之前被Google抓取

Question

我有一个正在开发的网站，并且正在尝试改善SEO。该网站有一个主页，可根据用户位置加载内容，并且需要一秒钟的时间来加载内容。但是我担心爬行的机器人不会等待页面加载和索引空白页面。解决这个问题的最佳方法是什么？

Answer 1

您可以尝试使用Google的Fetch As Google来查看Google如何看待您的内容。 Google抓取方式工具可让您测试Google如何抓取或呈现您网站上的URL。您可以使用Google抓取方式查看Googlebot是否可以访问您网站上的页面，页面呈现方式以及是否有任何页面资源（例如图像或脚本）被Googlebot阻止。此工具可以像Google正常的抓取和呈现过程中那样模拟抓取和呈现执行，对于调试网站上的抓取问题非常有用。

此外，请确保您没有阻止搜索引擎中的Javascript。