SparkBWA无法找到文件spark-submit

时间:2018-05-17 14:13:53

标签: apache-spark

我按照https://github.com/citiususc/SparkBWA链接安装SparkBWA:

git clone https://github.com/citiususc/SparkBWA.git
cd SparkBWA
mvn package

在'运行SparkBWA'它说要用命令运行它:

spark_dir/bin/spark-submit --class com.github.sparkbwa.SparkBWA SparkBWA-0.2.jar -h

但我没有安装 spark-submit 命令。

如何 spark-submit

感谢。

1 个答案:

答案 0 :(得分:0)

  • 安装Spark依赖项(JRE或JDK 1.7或1.8,不支持较新的Java版本)。
  • 从Spark下载页面下载支持的版本(看起来很漂亮 旧的,所以你可能不得不使用1.x分支)。对于简单测试,请使用带有捆绑Hadoop库的预构建变体。
  • 解压缩内容并使用新创建的目录中的bin/spark-submit命令。