客户端计算机中存在的Spark Yarn客户端模式访问文件

时间:2018-10-03 17:57:07

标签: apache-spark

我正在使用Yarn和deploy-mode作为客户端运行spark-submit,即在我的客户端计算机中将打开我的驱动程序进程。我在客户端计算机路径中存在一个文本文件,但该路径不是NFS挂载。因此,我可以不加载任何分布式fs或不安装NFS而访问此文件。

spark.read.csv("file:/path.txt").show

工作。

它应该处于部署模式的客户端

0 个答案:

没有答案