Hadoop配置对象读取XML

时间:2017-06-27 00:41:55

标签: hadoop apache-spark

我有一个XML文件,其中包含我想在Spark应用程序中读取的一些名称和值。如何使用Hadoop配置读入这些值并在我的代码中使用它们?

我尝试将XML文件上传到HDFS,但是当我使用conf.get()

时,我不确定该键应该是什么

1 个答案:

答案 0 :(得分:1)

也许您忘记将这些行包含在您的代码中:

val conf = new Configuration()
conf.addResource(new Path(<path-to-file>))