内置的spark不适用于crontab

时间:2017-05-24 07:53:17

标签: apache-spark crontab built-in

我在一台机器上使用内置java类的Spark。

我在crontab上遇到运行spark-submit的问题。

'/用户/ test.sh'

#! /bin/bash
export SPARK_HOME=/usr/local/spark
$SPARK_HOME/bin/spark-submit test.jar

和'crontab -e'

45 16  *  *  * /user/a.sh           >> /user/log/test.log

然后,'test.log'为空。

有什么想法吗?

1 个答案:

答案 0 :(得分:0)

我自己解决了这个问题。

我在下面添加了' test.sh'文件。

export PATH = $ PATH:$ SPARK_HOME:/ app / jdk / bin /

可能没有找到jdk路径。