找不到Spark-submit -class命令?

时间:2018-06-11 19:13:28

标签: scala apache-spark

我正在使用kafka和Apache spark运行一个项目。要运行我的kafka流,我在项目中运行此命令:

$('html').load('mypage.php', function(){
    var the_body = $('body', $(this));
    the_body.append("<h1>BLAHBLAHBLAH</h1>");
});

但是我只是得到以下错误:

$SPARK_HOME/spark-submit --class "TwitterStream" --master local[*] target/scala-2.11/scalakafka_2.11-0.1.jar

如果我将\添加到命令的末尾,它似乎进入spark-submit,但没有任何反应!

1 个答案:

答案 0 :(得分:0)

首先,您使用echo $SPARK_HOME检查是否已正确配置SPARK_HOME。如果没有,则运行export SPARK_HOME=<your spark folder's path>