在线一只蜘蛛正在从scrapy import cmdline运行

时间:2019-03-07 20:10:08

标签: python python-3.x python-2.7 web-scraping scrapy

这是我的python脚本,用于运行蜘蛛名称ndtv,republic,thehindu,zee和indiatv

from scrapy import cmdline
cmdline.execute("scrapy crawl ndtv".split())
cmdline.execute("scrapy crawl republic".split())
cmdline.execute("scrapy crawl thehindu".split())
cmdline.execute("scrapy crawl zee".split())
cmdline.execute("scrapy crawl indiatv".split())

当我运行脚本时,只有第一个蜘蛛(即ndtv蜘蛛)正在运行,脚本关闭而没有打开/运行另一个蜘蛛。我需要一种运行所有蜘蛛的方法。

0 个答案:

没有答案