基于Oozie文件的动态日期基础文件名协调器

时间:2016-09-27 10:05:11

标签: hadoop hdfs oozie oozie-coordinator

我们收到格式为data_YYYYMMDD.avro的文件,例如data_20160927.avro格式为schemaNNN的动态命名文件夹,例如schema003

是否可以设置一个协调器,当包含前几天的文件到达时,该协调器将触发工作流程?

我尝试过使用数据集,但遇到了以下问题:

  1. uri-template似乎不允许使用通配符,例如/ parentFolder /模式*
  2. 完成标志似乎不允许EL功能,例如数据_ $ {YEAR} $ {MONTH} $ {DAY} .avro

0 个答案:

没有答案