spark应用程序如何使用webhdfs访问远程hadoop集群上的数据？

Question

spark应用程序可以使用HDFS访问远程hadoop环境中的数据，但是一些hadoop集群限制了对WebHDFS的数据访问，因此HDFS访问不可用。

我的spark应用程序如何使用webhdfs访问远程hadoop环境中的数据？

我见过这个similar question。另一个问题与此不同，因为它没有说明火花环境和hadoop环境是不同的环境。