标签： http-headers httpwebrequest web-crawler crawler4j
我正在使用crawler4j从Google Play商店（https页面）中提取一些数据。但是，我检查了我下载的html内容，发现它与我在浏览器中看到的页面源略有不同。为什么？是因为谷歌检测到我正在使用机器人客户端（所以我的http请求的处理方式不同）？
任何人都可以帮助我吗？非常感谢！
我已经解决了这个问题。感谢所有的帮助：）