在PDI中使用启用阻止 - Pig Script Executor

时间:2016-03-09 13:42:26

标签: apache-pig pentaho pdi

我在Pentaho 5.2中探索大数据插件。我试图运行Pig Script执行者。我无法理解的用法 Enabling Blocking。 PDI文档说明

  

如果选中,Pig Script Executor作业条目将阻止下游   执行的条目直到脚本完成处理。

我知道运行pig脚本会将执行转换为Map reduce作业。我正在使用Start job -> Pig Script运行这项工作。如果我禁用Enable blocking step我无法执行脚本。我得到了许可被拒绝的错误。根据文档“”。

下游是什么意思。我没有从猪脚上传出任何啤酒花。我无法理解Enable blocking step。任何提示都可能有所帮助,我们将不胜感激。

1 个答案:

答案 0 :(得分:1)

启用阻止:任务部署到Hadoop集群; PDI将跟进进度,只在Hadoop作业执行完成后继续完成剩余的工作任务;

禁用启用阻止:PDI将任务部署到Hadoop集群并忘记它。其余的作业任务在群集接受任务后立即进行,但不等待它完成。