Nutch：db_unfetched狀態URL的標準

Question

在哪些情況下url轉到db_unfetched階段。 url不滿足crawlurlfilter.txt也會進入db_unfetched狀態。

Answer 1

以下網址標記爲DB_ unfetched：

1. 一個新鮮注入的網址，
2. 網址這心不是牽強，
3. 一個URL其無法抓取由於一些例外

crawlurlfilter.txt不允許該網址有資格獲取。所以這些網址將保持db_unfetched。