oozie作为mapred用户在hdfs中读写

Question

我在oozie工作流程中运行python脚本。 python脚本从hdfs操作读取文件并将其写回新文件夹中的hdfs。运行oozie工作流程时，我没有收到任何错误。但操纵数据不是用hdfs编写的。我确实看到默认情况下新文件夹的用户是mapred。我不太确定这是否与mapred用户有关。我正在以hdfs用户身份运行oozie工作流程。 python脚本从shell脚本运行时成功运行并提供预期的结果。

任何帮助都将不胜感激。

谢谢！

Answer 1

Oozie将以hdfs用户身份运行您的脚本。

尝试使用hdfs登录，然后浏览HDFS以查看输出文件夹。