Hadoop MapReduce程序在Eclipse中运行良好,但在导出到.jar文件时却没有

时间:2014-09-04 15:35:33

标签: java hadoop mapreduce hbase bigdata

在Eclipse中,我添加了三个目录中的外部库。来自hadoop的lib目录,与我的Eclipse项目中的hbase和两个本地目录相同的其他jar。执行导出的jar文件时,我得到一个与hbase相关的ClassNotFoundException。我确定我的外部库存在问题。

我执行程序就像那样:

hadoop jar /home/brunneis/Escritorio/mr.jar Principal -libjars /bigdata/hbase/lib/*.jar,/home/brunneis/workspace/MapReduce/lib/*.jar,/home/brunneis/workspaces/MapReduce/lib1.1.2/*.jar

在hadoop-env.sh文件中,我还添加了这一行:

export HADOOP_CLASSPATH="/bigdata/hbase/lib/*.jar;/home/brunneis/workspace/MapReduce/lib/*.jar;/home/brunneis/workspace/MapReduce/lib1.1.2/*.jar"

这就是我得到的:

Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/hadoop/hbase/HBaseConfiguration
at Principal.main(Principal.java:27)
at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:57)
at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
at java.lang.reflect.Method.invoke(Method.java:606)
at org.apache.hadoop.util.RunJar.main(RunJar.java:160)
Caused by: java.lang.ClassNotFoundException: org.apache.hadoop.hbase.HBaseConfiguration
    at java.net.URLClassLoader$1.run(URLClassLoader.java:366)
    at java.net.URLClassLoader$1.run(URLClassLoader.java:355)
    at java.security.AccessController.doPrivileged(Native Method)
    at java.net.URLClassLoader.findClass(URLClassLoader.java:354)
    at java.lang.ClassLoader.loadClass(ClassLoader.java:425)
    at java.lang.ClassLoader.loadClass(ClassLoader.java:358)
... 6 more

非常感谢你。

1 个答案:

答案 0 :(得分:0)

当一个类在运行时不可见但处于编译时,会出现NoClassDefFoundError。这可能与JAR文件有关,因为未包含所有必需的类文件。关于你的情况,下面的帖子可能对你有帮助。

HBase - java.lang.NoClassDefFoundError in java

从上面的链接中找到答案。

  

它是Hbase客户端Java程序,您不应该使用" hadoop"来运行它。它应该是标准的jar程序运行风格,如:java -jar yourjar.jar

     

当您使用&#34;&gt; jar -cvf TestHBase.jar -C TestHBase /。&#34;时,它并不保证可以在您遇到的运行时期间找到jar依赖项。< / p>      

在eclipse中,jar导出函数可以选择&#34; Runable&#34;广口瓶中。

     

因此建议您分别运行测试类,并明确指出依赖jar。