在spark中获取hdfs文件路径

时间:2016-07-25 16:12:41

标签: scala apache-spark

我想知道我是否有一些优雅的方法来获取某个路径下的某个目录。例如,我在hfs上有一条路径,比如/ a / b / c / d / e / f,我得到一个/ b / c,是否有任何直接的方式来获取路径/ a / b / c / d / e?我想我可以在正则表达式的帮助下做到这一点。但我仍然希望找到更简单的方法来使我的代码更清洁。我的evn:spark 1.6,语言:Scala

1 个答案:

答案 0 :(得分:0)

经过几天的调查,我认为可能没有这么简单的方法(集成API)来做这个提取工作。所以写一个好的正则表达式是明智的选择。 欢迎任何建议。