Scrapy忽略使用http auth的页面

Question

在scrapy中是否有一种方法或设置可以在抓取过程中忽略具有基本http身份验证的网页。

由于