我知道报道的问题很少。 在我的情况下我的情况是我定期在R上写了一些工作。我知道有一种方法可以使用RHadoop直接从R访问hadoop。
我执行我的hadoop工作:
$hadoop jar /usr/lib/hadoop-0.20-mapreduce/contrib/streaming/hadoop-streaming-2.0.0-mr1-cdh4.1.1.jar
-input test/test_r_mr -output RMR7 -file ~/mapper.R -file ~/reducer.R
错误如下所示:
ERROR =" java.io.IOException:键入map中的键不匹配:expected org.apache.hadoop.io.Text,收到了 org.apache.hadoop.io.LongWritable
有没有人知道如何使用写在R上的mapper / reducer来解决这个问题?
谢谢。