Python Amazon Scrape没有捕获任何信息

时间:2016-06-29 14:46:01

标签: python bash amazon scrape

我做了一个小脚本,旨在检查某些产品的价格变化,因为我在易趣上卖,并想跟踪亚马逊。使用lxml获取价格并将其与已存储的内容进行比较,然后发送电子邮件(如果有更改),这个想法非常简单。我认为我在测试时正在按照我想要的方式工作,然后我希望它以15分钟的间隔运行一整天,所以我设置了一个bash脚本来处理这个问题但是我注意到的是很快也许10-15号它开始得到NULL值然后它去了验证码..你知道是否有任何亚马逊防止刮擦,如果有的话有没有合法的方法去做?

是的我遇到了上面提到的问题,但我看到它已经很老了,那个人使用了urllib我不会使用lxml,http和以下标题:

{'User-Agent': 'Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/42.0.2311.90 Safari/537.36'}

我只是想知道自从您提到的问题以来是否有办法解决这个问题。

0 个答案:

没有答案