我在哪里可以找到Cloudera经理的spark.driver.maxresultsize属性？

Question

任何人都可以提供我可以在Cloudera Manager中更改环境变量spark.driver.maxresultsize的值的位置吗？

先谢谢

Answer 1

实际上，您可以使用Spark web ui查看可能在http://your-master-node:4040找到的环境变量，前提是您已经在属性文件中设置了spark.driver.maxresultsize变量（spark-defaults.conf ）。

  

http：//：4040上的应用程序Web UI在“环境”选项卡中列出了Spark属性。这是一个检查以确保您的属性设置正确的有用位置。请注意，仅显示通过spark-defaults.conf，SparkConf或命令行显式指定的值。对于所有其他配置属性，您可以假设使用默认值。