标签: apache-spark cloudera-manager
我正在使用Hadoop的Cloudera发行版,使用的Spark2版本是2.2。我正在搜索以下链接的“内存管理”部分中提供的内存管理参数:
https://spark.apache.org/docs/2.2.0/configuration.html
但是,我没有在spark2> Cloudera Manager的配置链接中看到这些配置参数。
我认为我的理解有些差距。如果这些参数要手动更改,请提出建议。
答案 0 :(得分:0)
嗨,
我已经在cloudera Manager的spark配置中以这种方式提供了内存调整的参数。发生的是,如果保存了此内容,则spark-defaults.conf文件将在服务器中更新,并且在重新启动Spark2服务后,您将从配置更改中受益。
希望有帮助。