我正在使用小程序将数据写入Accumulo。
程序在手动添加罐子时工作。但是,当使用maven构建时,使用与手动使用的版本相同的版本,它抛出:
java.lang.NoClassDefFoundError:org/apache/accumulo/core/client/Instance。
我该如何解决?
您的作业将在MR网络中的所有节点上运行。您需要在所有节点上安装适当的jar,以便它正常工作。
正如您所注意到的,另一种方法是将所有内容都包含在一个uber jar中,其中包含您需要的所有内容。这样,当您的作业被发送到每个节点时,您将拥有所需的一切。使用maven实现这一点的一种方法是使用插件:
<build>
<plugins>
<plugin>
<artifactId>maven-assembly-plugin</artifactId>
<version>2.2.1</version>
<configuration>
<descriptors>
<descriptor>src/main/assembly/hadoop-job.xml</descriptor>
</descriptors>
</configuration>
<executions>
<execution>
<id>make-assembly</id>
<phase>package</phase>
<goals>
<goal>single</goal>
</goals>
</execution>
</executions>
</plugin>
</plugins>
</build>
在你的hadoop-job.xml中,你可能有
<assembly>
<id>job</id>
<formats>
<format>jar</format>
</formats>
<includeBaseDirectory>false</includeBaseDirectory>
<dependencySets>
<dependencySet>
<unpack>false</unpack>
<scope>runtime</scope>
<outputDirectory>lib</outputDirectory>
<excludes>
<exclude>${groupId}:${artifactId}</exclude>
</excludes>
</dependencySet>
<dependencySet>
<outputDirectory></outputDirectory>
<unpack>true</unpack>
<includes>
<include>${groupId}:${artifactId}</include>
</includes>
</dependencySet>
</dependencySets>
</assembly>
有关此插件的更多信息,请访问http://maven.apache.org/plugins/maven-assembly-plugin/
您必须下载accumulo-core.jar
并将其添加到类路径中。