如何在Apache Spark中使用log4j输出主机名？

Question

我的代码和配置如下。当我将我的火花作业提交给纱线群时，它适用于本地主机模式，但不适用于群集。

!IsPostBack

有人可以帮助我吗？ 感谢。

Answer 1

首先，您实际上并未使用＆＃39;记录器＆＃39;，您必须添加以下内容：

logger.info(InetAddress.getLocalHost().getHostName())

其次，您最好分析$ SPARK_HOME $ / logs文件夹中的日志。