如何在Apache Spark开源Cluser中将用户登录凭据设置为Spark WebUI

时间:2019-01-31 19:04:52

标签: apache-spark hadoop yarn hadoop-plugins

我们在项目中使用了开源的Apache Spark集群。需要以下帮助。

  1. 如何为Spark Web UI登录启用登录凭据?
  2. 如何从spark webui禁用“杀死按钮”选项?

有人可以帮我解决问题1或2或同时解决这两个问题吗?

谢谢。

1 个答案:

答案 0 :(得分:0)

  1. 好的。根据{{​​3}},您需要设置spark.ui.filters设置以引用实现您要部署的身份验证方法的过滤器类。 Spark不提供任何内置的身份验证筛选器。
    您可以看到一个过滤器示例this
  2. 您需要修改ACL,以控制谁有权修改正在运行的Spark应用程序。可以通过配置参数spark.acls.enablespark.ui.view.aclsspark.ui.view.acls.groups来完成。您可以详细了解here