尝试用django-dynamic-scraper收集数据(django,scrapy)

时间:2016-07-07 18:01:14

标签: python django xpath scrapy django-dynamic-scraper

我在我的一个应用程序中使用django-dynamic-scraper,我已经阅读了文档,以下是我的设置: enter image description here enter image description here 1)不幸的是,刮刀仅适用于第一页并且仅收集url_proiect和问题,另一方面,其他属性保持为空。我试图为这些对象粘贴相对和绝对XPath,但没有任何效果。

2)我不太了解如何为SCRAPER ELEMENTS和REQUEST PAGE TYPES设置详细页面。

在这种情况下调试刮刀的最佳方法是什么?如何以最少的尝试找到正确的XPath?

0 个答案:

没有答案