如何停止将火花日志写入EMR群集上的stderr和stdout文件

时间:2019-07-08 06:28:44

标签: apache-spark amazon-emr

我已按照以下AWS文档修改了主节点上的log4j.properties。 https://aws.amazon.com/premiumsupport/knowledge-center/emr-cluster-disk-space-spark-job/

正在将日志写入指定的位置和特定的配置。

但是stderr和stdout仍然存在,日志也正在写入这些文件,因此我想在下面知道两件事。

  1. 如何停止将日志写入这些文件
  2. 如何配置执行程序以将日志写入我的自定义文件

0 个答案:

没有答案