无法使用流集将文件从本地加载到HDFS中(已成功验证!)

时间:2018-10-22 11:05:34

标签: hadoop file-upload hdfs pipeline streamsets

我刚刚开始使用流集,并且我正在尝试将文本文件从本地加载到HDFS。 请注意:我正在使用Cloudera Manager,这是“ core-site.xml”的视图:

core-site.xml

本地文件是存储在“ / home / cloudera / Desktop”中的文本文件。

这是Streamsets中源(本地)配置的视图:

Local file configuration in Streamsets

这是Streamsets中Hadoop fs配置的视图:

Hadoop fs configuration in Streamsets

它已成功验证!

Pipline Has Been Validated

玩完pipline之后,应该在我指定的HDFS目录中找到文件,尤其是在“ / user / cloudera”目录下。

但是当我运行它时,该文件尚未加载。

我确定我错过了一些东西,但找不到答案。 你能帮忙吗?

谢谢

1 个答案:

答案 0 :(得分:0)

您需要播放管道,而不仅仅是验证它。