Hadoop MapReduce程序在Eclipse中运行良好，但导出到.jar文件时运行不好

Question

在Eclipse中，我从三个目录添加外部库。hadoop中的lib目录、hbase中的相同目录以及我的Eclipse项目中的两个本地目录和其他jar。当执行导出的jar文件时，我会得到一个与hbase相关的ClassNotFoundException。我确信这是我的外部库的问题。

我执行的程序就是这样的：

hadoop jar /home/brunneis/Escritorio/mr.jar Principal -libjars /bigdata/hbase/lib/*.jar,/home/brunneis/workspace/MapReduce/lib/*.jar,/home/brunneis/workspaces/MapReduce/lib1.1.2/*.jar

在hadoop-env.sh文件中，我还添加了以下行：

export HADOOP_CLASSPATH="/bigdata/hbase/lib/*.jar;/home/brunneis/workspace/MapReduce/lib/*.jar;/home/brunneis/workspace/MapReduce/lib1.1.2/*.jar"

这就是我得到的：

Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/hadoop/hbase/HBaseConfiguration
at Principal.main(Principal.java:27)
at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:57)
at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
at java.lang.reflect.Method.invoke(Method.java:606)
at org.apache.hadoop.util.RunJar.main(RunJar.java:160)
Caused by: java.lang.ClassNotFoundException: org.apache.hadoop.hbase.HBaseConfiguration
    at java.net.URLClassLoader$1.run(URLClassLoader.java:366)
    at java.net.URLClassLoader$1.run(URLClassLoader.java:355)
    at java.security.AccessController.doPrivileged(Native Method)
    at java.net.URLClassLoader.findClass(URLClassLoader.java:354)
    at java.lang.ClassLoader.loadClass(ClassLoader.java:425)
    at java.lang.ClassLoader.loadClass(ClassLoader.java:358)
... 6 more

非常感谢。

Answer 1

NoClassDefFoundError在类在运行时不可见但在编译时出现。这可能与JAR文件有关，因为没有包括所有必需的类文件。关于你的案例，下面的帖子可能会对你有所帮助。

HBase-java.lang.NoClassDefFoundError在java 中

粘贴上面链接中的答案。

这是Hbase客户端Java程序，您不应该使用"；hadoop"；。它应该是一个标准的jar程序运行风格，比如：java-jaryourjar.jar

当您使用">jar-cvf TestHBase.jar-C TestHBase/&"；，它并不保证在运行时可以找到jar依赖项，这是你面临的问题

在eclipse中，jar导出函数可以选择"；可运行的"；罐子

因此，建议您单独运行测试类，并明确指出依赖的jar。