Nutch：db_unfetched urls状态的标准

Question

在哪些情况下url进入db_unfetched阶段。 url不满意crawlurlfilter.txt也会进入db_unfetched状态。

Answer 1

以下网址标记为db _ unfetched：

1. 新注入的网址，
2. 未提取的网址
3. 由于某些异常而无法获取的网址

crawlurlfilter.txt不允许网址有资格获取。因此，网址将保持db_unfetched。