标签: python scrapy scrapy-spider scrapy-pipeline
简单地说,我在Scrapy中抓取网页数据。
我需要分析关键字/正则表达式的抓取数据,如果匹配,则将数据传输到数据库。如果没有找到,请放弃。
我的问题是:我应该/可以从Scrapy中做到这一点吗?如果有的话,你有任何高级别的建议让我进一步研究。
或者我应该在Scrapy之外执行此任务。
理想情况下,我想在Scrapy中做到这一切。
ps我是Scrapy / Python和Stackoverflow的新手,并尽可能地研究了这一点,并没有找到明确的答案/指导。