抓取网站失败,因为未启用javascript

时间:2013-04-16 20:03:41

标签: javascript web-crawler

我使用Abot进行抓取,

我想抓取一个似乎阻止任何未启用javascript的请求的网站 这是一个php页面,我得到一个“请激活javascript来查看这个网站。”而不是真实的网站

页面如何知道javascript是否已启用? (在你看来 - 你认为我能克服这个吗?)

由于

1 个答案:

答案 0 :(得分:1)

除非您使用启用了javascript的客户端抓取该网站,否则您运气不佳。