标签: hadoop oozie hadoop2 cloudera-cdh oozie-coordinator
如何使用Oozie检查HDFS位置中的文件是否存在?
在我的HDFS位置,我会在每天晚上11点收到类似test_08_01_2016.csv的文件。
test_08_01_2016.csv
我想在11.15 PM之后检查此文件是否存在。我可以使用Oozie协调员工作安排批处理。
但是如何验证文件是否存在于HDFS中?
答案 0 :(得分:4)
你可以在oozie中使用EL表达式,如:
FlexibleInstances
您还可以使用捕获输出使用简单的shell脚本构建文件的名称。