我想设置蜘蛛的seen
抓取链接。我试过这个
self.settings.overrides['JOBDIR']= "seen_for_"+self.Category+" "+self.Source+" "+self.Action
我得到了异常,这意味着(但确切地说没有)设置不存在。
我尝试像这样导入它:
from scrapy.utils.project import get_project_settings
但我得到了同样的例外
然后我试了一下:
from scrapy.settings import Settings
但我知道我的蜘蛛没有附加到任何爬虫上,我真的不想附加任何爬虫,因为我只是使用蜘蛛而不是爬虫