标签: apache-spark
我们有一个方案是从spark应用程序中读取存储在边缘节点的本地文件系统中的时间戳,并且在一些计算之后,需要将更新的时间戳存储回同一文件系统中。
此应用程序可以在纱线客户端模式下运行时访问该文件,但在纱线群集模式下运行时无法找到该文件且作业失败,并指出“FileNotFound Exception”
我们如何从以纱线群集模式运行的火花应用程序访问文件以进行读/写。
我曾尝试过的事情: