向Google Cloud上的Kubernetes集群提交Spark遭到未经授权的401

时间:2018-10-16 13:54:59

标签: apache-spark kubernetes google-cloud-platform

这是非常标准的“火花提交”操作,很奇怪的是,我有时会收到401,如果我等了几分钟,就可以再次运行,直到下次获得401。

与这个问题非常相似 https://jira.apache.org/jira/browse/SPARK-24227

我只是想知道我在提交时是否没有设置GOOGLE_APPLICATION_CREDENTIAL,但一开始我还没有设置任何凭据,并且仍然可以运行。

有人有类似的问题吗?

1 个答案:

答案 0 :(得分:0)

Spark无法刷新访问令牌是一个微妙的错误。一种解决方法是:

  • 运行虚拟kubectl命令刷新访问令牌。例如: kubectl获取名称空间