创建Spark会话后，我们可以更改spark.dynamicAllocation.minExecutors吗？

Question

我是Apache Spark的新手，正在阅读有关为spark会话设置不同配置的问题。我的问题是，如果在构建Spark会话时设置执行程序内存，可以在创建会话后更改它以防万一我们想要更多的内存吗？ ？

Answer 1

不，除非您重新启动Sparkconext。迄今为止，我从未做到过。

YARN动态资源分配可以更改某些事情，但这超出了您的明确控制。