谷歌地图API robots.txt文件阻止抓取

Question

我在我的网络应用程序中使用了谷歌地图，地点，方向javascript API。应用程序通过对google api进行ajax调用，根据用户输入加载不同的位置。幸运的是，Google最近可以抓取ajax。

当我在Googles网站管理员工具＆＃39;获取Google＆＃39; 功能中查看网址时，响应如下所示

以下是google maps api robots.txt文件

谷歌地图api阻止谷歌机器人？在这种情况下，请建议我应该采取什么方法来获取页面内容？