将参数从coordinator.xml传递给workflow.xml oozie

时间:2014-07-15 19:29:25

标签: hadoop oozie oozie-coordinator

我要求我需要将协调员的日期带到oozie的工作流程。

为此,我开发了样本协调员和工作流程。但是,在启动协调程序作业后,所有工作流作业都失败,错误代码为E0701。表示xml解析错误。我很难尝试,我做错了什么?我无法找到问题所在?请帮忙。

workflow.xml

<workflow-app name="test_wf" xmlns="uri:oozie:workflow:0.4">
    <start to="samp_pig"/>
    <action name="samp_pig">
        <fs>
            <job-tracker>${jobTracker}</job-tracker>
            <name-node>${nameNode}</name-node>
            <delete path='${nameNode}/tmp/${wf.conf("DATE")}'/>
        </fs>
        <ok to="end"/>
        <error to="kill"/>
    </action>
    <kill name="kill">
        <message>Action failed, error      message[${wf:errorMessage(wf:lastErrorNode())}]    
</message>
    </kill>
    <end name="end"/>
</workflow-app>

coordinator.xml

<coordinator-app name="test"
  frequency="5"
  start="2014-07-15T11:35Z" end="2014-07-17T12:15Z" timezone="America/Los_Angeles"
  xmlns="uri:oozie:coordinator:0.2">
  <action>
    <workflow>
      <app-path>${wf_application_path}</app-path>
      <configuration> 
    <property>
        <name>DATE</name>
        <value>${coord:formatTime(coord:nominalTime(), 'yyyy-MM-dd')}</value>
    </property>
      </configuration>
   </workflow>
  </action>

job.properties

jobTracker=localhost.localdomain:8021
nameNode=hdfs://localhost.localdomain:8020
oozie.coord.application.path=/tmp/uc1/
oozie.use.system.libpath=true
wf_application_path=/tmp/uc1/wf1/
使用

命令

hadoop fs -rmr /tmp/uc1/
hadoop fs -mkdir /tmp/uc1/wf1/
hadoop fs -put * /tmp/uc1/wf1/
hadoop fs -put * /tmp/uc1/
oozie job -oozie  http://localhost.localdomain:11000/oozie -config job.properties -submit

3 个答案:

答案 0 :(得分:0)

要在coordinator.xml中获取DATE属性的值,只需使用${DATE}

    <fs>
        <job-tracker>${jobTracker}</job-tracker>
        <name-node>${nameNode}</name-node>
        <delete path='${nameNode}/tmp/${DATE}'/>
    </fs>

答案 1 :(得分:0)

其他观察 - 即使您尝试使用WF EL功能 - 正确的方式是 wf:而不是 wf。

答案 2 :(得分:0)

我发现了自己的错误。我们不应该使用

<job-tracker>${jobTracker}</job-tracker>
<name-node>${nameNode}</name-node>

在“fs”内部行动。 保持原样。甚至协调员工作正常。