将hapi第三方库(jar)添加到map-reduce

时间:2016-04-28 15:19:04

标签: java hadoop mapreduce cloudera hapi

我正在尝试将hapi jar添加到map-reduce任务中。我在/ home / training / lib下有所有必需的罐子 我制作了包含我需要的所有hapi罐子的胖罐子 hadoop jar mp.jar stubs.MsgParser infile outfile -libjars /home/training/lib 我懂了      Usage: MsgParser [generic options] <input dir> <output dir> 在我的驱动程序中,我实现了ToolRunner
更多信息:

  • 我正在使用CloudEra发行版。
  • 我只需要在mapper
  • 中使用jar
  • mp.jar是从Eclipse
  • 导出的jar

我的hadoop jar命令是否需要修改或是否有任何其他解决方案来添加这些罐子,我无法将罐子复制到/usr/lib/hadoop/client-0.20因为我不是主人
提前谢谢!

1 个答案:

答案 0 :(得分:0)

<强>解决方案: 将您的罐子上传到hdfs并简单地添加

1

在驱动程序的主要方法