火花记忆分数参数

时间:2018-07-05 12:31:41

标签: apache-spark cloudera-manager

我正在使用Hadoop的Cloudera发行版,使用的Spark2版本是2.2。我正在搜索以下链接的“内存管理”部分中提供的内存管理参数:

https://spark.apache.org/docs/2.2.0/configuration.html

但是,我没有在spark2> Cloudera Manager的配置链接中看到这些配置参数。

我认为我的理解有些差距。如果这些参数要手动更改,请提出建议。

1 个答案:

答案 0 :(得分:0)

Spark configuration

嗨,

我已经在cloudera Manager的spark配置中以这种方式提供了内存调整的参数。发生的是,如果保存了此内容,则spark-defaults.conf文件将在服务器中更新,并且在重新启动Spark2服务后,您将从配置更改中受益。

希望有帮助。