criteia nutch在爬行时选择TopN文档?

时间:2012-01-27 09:39:06

标签: nutch

criteia nutch在爬行时选择TopN文档?以及nutch如何创造细分市场。?

1 个答案:

答案 0 :(得分:1)

以下是需要考虑的事项:

  1. 网址的分数
  2. 允许抓取属于同一主机的网址数。
  3. 是否达到了网址的重新获取时间?