如何将Nutch 2.3数据转储到WARC文件中?

时间:2017-01-26 10:16:46

标签: nutch warc

我需要将数据从Nutch 2.3转储到WARC文件中。但是,我找不到必要的模块。 Nutch 1.x有这种能力。我想知道正确的方法。

1 个答案:

答案 0 :(得分:1)

正如你所说,目前WARC导出器模块还没有移植到Nutch的2.x分支,但是移植https://github.com/apache/nutch/blob/master/src/java/org/apache/nutch/tools/warc/WARCExporter.java模块并不是那么难。作为一般规则,Nutch的1.x分支仍然比2.x分支更常用和更好地配备(至少现在)。