标签: hadoop apache-spark
我有一个XML文件,其中包含我想在Spark应用程序中读取的一些名称和值。如何使用Hadoop配置读入这些值并在我的代码中使用它们?
我尝试将XML文件上传到HDFS,但是当我使用conf.get()
答案 0 :(得分:1)
也许您忘记将这些行包含在您的代码中:
val conf = new Configuration() conf.addResource(new Path(<path-to-file>))