在Spark中获取文件属性(如创建时间)

时间:2015-05-06 02:30:44

标签: apache-spark

我正在使用Apache spark并且需要知道在从本地系统的文件夹加载文本文件时是否可以将文件创建日期和行作为键值对

1 个答案:

答案 0 :(得分:0)

您可以通过自定义的本地文件输入rdd实现此目的。

我的另一个答案是在SO

上从头开始创建RDD类

如果您考虑使用自定义RDD,我可以稍后更新我的答案。