从PS和Web-UI隐藏Spark环境变量值

时间:2018-07-05 23:38:59

标签: apache-spark environment-variables encapsulation spark-java spark-webui

我是Spark的新手,请需要专家的帮助。我在JAVA的MAC上使用Spark 2.3.1

我将机密安全信息存储在环境变量中。但是,由于它是机密信息,因此我不想通过ps -ehttp://localhost:4040/environment/公开其值。

Spark中是否可以让我隐藏值?还是通过代码密封该值,而不会影响其他spark / java函数。

谢谢。

1 个答案:

答案 0 :(得分:0)

您不应该使用环境变量来存储机密信息,有些工具例如Hashicorp Vault

关于ps -e-如果某人有权访问该计算机,则无论如何都可以回显环境变量。 至于spark UI-您可以确保对其进行访问,请参见here