标签: scrapy scrapy-pipeline
我正在考虑测试scrapy管道,(我已经知道蜘蛛工作了)当我遇到它时,我可以使用目标网站上的页面的本地副本,而不是反复用我的蜘蛛在线点击它。但我没有看到任何暗示这种选择的东西。有什么理由说这不会起作用,或者不是最佳做法?