从安全的HDFS集群读取Mesos上的Spark

时间:2016-03-14 16:04:38

标签: hadoop apache-spark mesos

我们在Mesos上部署了Spark,当我们尝试从HDFS读取时,我们遇到了问题。 开箱即用我们尝试使用Kerberos,它在本地模式下工作正常,但在Mesos上运行时失败(即使我们确保每台机器都有一个有效的令牌)。

我的问题是,我们有什么替代方案?

根据this document,只有两个选项是Kerberos和共享密钥,Kerberos只能在YARN上运行。 我还没有找到任何文章如何在HDFS上设置共享密码。

0 个答案:

没有答案