将在YARN上运行的Spark作业日志保存到启动服务器

时间:2018-11-06 09:59:04

标签: apache-spark logging yarn

我能够使用yarn客户端将日志保存到启动服务器(运行spark作业的服务器)。但是,当我尝试在群集上提交作业时,遇到一个错误,指出文件路径不存在(显然是因为它在yarn执行程序上运行)。有没有办法将日志记录从Spark执行程序路由到启动服务器?

0 个答案:

没有答案