使用IP地址与Scrapy爬网

时间:2017-05-19 17:02:48

标签: python scrapy web-crawler

我正在尝试抓取以下网站“http://www.mouse.co.il/misc/search-results?a=v&what=events&where=talAviv-merkaz-jerusalem-sharon-haifa-south

虽然我的服务器的DNS服务器有问题所以它似乎无法找到mouse.co.il。

我曾尝试过抓取'http://www.184.50.166.245/misc/search-results?a=v&what=events&where=talAviv-merkaz-jerusalem-sharon-haifa-south' 相反,虽然我得到这个错误:

ERROR: Error downloading <GET http://www.184.50.166.245/misc/search-results?a=v&what=events&where=talAviv-merkaz-jerusalem-sharon-haifa-south>

我该如何解决?

谢谢!

1 个答案:

答案 0 :(得分:0)

我认为Web服务器存在问题。如果您有DNS问题,最好的方法 - 使用您的文件主机并添加名称和IP记录。