Web抓取动态内容

时间:2013-03-23 20:49:52

标签: python web-scraping windmill

我正在尝试使用python windmill模块抓取网页。但是当加载特定网页时,它会不断陷入困境:

clientele.waits.forElement(xpath=u"//body[@class='yellow']/table", timeout=30000)

收到的错误是

raise WindmillTestClientException(result['result'])

但是当我尝试用单独的代码抓取这个网页时,它可以工作。由于风车文件不足,我无法确定错误的原因。

有人可以帮我识别错误或指向一个更好的模块,即更好记录的模块吗?

1 个答案:

答案 0 :(得分:0)

三种流行的解决方案: