使用Oozie中的SSH Action在HDF中创建一个目录



我必须在Oozie中使用SSH Action在HDF中创建一个目录。 我的样本工作流程是

<workflow-app name="sample-wf" xmlns="uri:oozie:workflow:0.1">
    <action name="testjob">
        <ssh>
            <host>name@host<host>
            <command>mkdir</command>
            <args>hdfs://host/user/xyz/</args>
        </ssh>
        <ok to="end"/>
        <error to="fail"/>
    </action>
</workflow-app>

我在执行过程中遇到错误。有人可以指导我在这里缺少什么意义吗?

您无法使用 *nix mkdir命令在HDFS中制作目录。您在代码中显示的用法将尝试在本地文件系统上执行MKDIR命令,而您希望在HDFS中创建一个目录。

引用oozie document @ http://oozie.apache.org/docs/3.3.0/dg_sshactionextension.html;它指出

shell命令在远程主机中指定用户的主目录中执行。

<workflow-app name="sample-wf" xmlns="uri:oozie:workflow:0.1">
<action name="testjob">
    <ssh>
        <host>name@host<host>
        <command>/usr/bin/hadoop</command>
        <args>dfs</args>
        <args>-mkdir</args>
        <args>NAME_OF_THE_DIRECTORY_YOU_WANT_TO_CREATE</arg>
    </ssh>
    <ok to="end"/>
    <error to="fail"/>
</action>

以上代码取决于您的Hadoop二进制的路径。

最新更新