nutch爬行与solr,作业失败深度> = 2

时间:2014-10-08 21:10:13

标签: nutch

我正在尝试在本地计算机上运行Nutch crawler并希望使用solr索引检索到的数据。 使用apache-nutch-1.9和solr-4.10.1

截至目前,它们已安装并且似乎在深度= 1时运行。

深度= 2

时出现以下错误
bin/crawl urls/ crawl http://localhost:8983/solr 2

.....

Indexer: java.io.IOException: Job failed!
    at org.apache.hadoop.mapred.JobClient.runJob(JobClient.java:1357)
    at org.apache.nutch.indexer.IndexingJob.index(IndexingJob.java:114)
    at org.apache.nutch.indexer.IndexingJob.run(IndexingJob.java:176)
    at org.apache.hadoop.util.ToolRunner.run(ToolRunner.java:65)
    at org.apache.nutch.indexer.IndexingJob.main(IndexingJob.java:186)

0 个答案:

没有答案