如何使用oozie检查文件是否存在于HDFS位置?

时间:2016-08-19 07:46:01

标签: hadoop oozie hadoop2 cloudera-cdh oozie-coordinator

如何使用Oozie检查HDFS位置中的文件是否存在?

在我的HDFS位置,我会在每天晚上11点收到类似test_08_01_2016.csv的文件。

我想在11.15 PM之后检查此文件是否存在。我可以使用Oozie协调员工作安排批处理。

但是如何验证文件是否存在于HDFS中?

1 个答案:

答案 0 :(得分:4)

你可以在oozie中使用EL表达式,如:

FlexibleInstances

您还可以使用捕获输出使用简单的shell脚本构建文件的名称。