Scrapy - 如果找到关键字匹配,则将数据传输到数据库

时间:2017-01-18 16:04:19

标签: python scrapy scrapy-spider scrapy-pipeline

简单地说,我在Scrapy中抓取网页数据。

我需要分析关键字/正则表达式的抓取数据,如果匹配,则将数据传输到数据库。如果没有找到,请放弃。

我的问题是:我应该/可以从Scrapy中做到这一点吗?如果有的话,你有任何高级别的建议让我进一步研究。

或者我应该在Scrapy之外执行此任务。

理想情况下,我想在Scrapy中做到这一切。

ps我是Scrapy / Python和Stackoverflow的新手,并尽可能地研究了这一点,并没有找到明确的答案/指导。

0 个答案:

没有答案