显示驱动程序中的火花记忆设置

Question

spark-submit命令行包括密钥内存设置选项：

• - 执行人-芯
• - 执行存储器
• - NUM-执行人
• - 驱动程序存储器

这些设置是否可以从Driver程序中访问？目的是简单地将它们打印到日志中。

请注意，如果通过jvm选项明确设置了spark.executor.cores，那么我们只需打印出System.getProperty("spark.executor.cores") 。同样适用于其他设置。但是spark-submit命令行选项不系统属性，因此不会以特定方式访问。