如何在spark-submit命令中指定spark版本1.6?

时间:2018-05-08 03:33:37

标签: apache-spark

如何在spark-submit命令中指定spark版本1.6? 我们目前有火花1.6。我们公司计划很快升级火花。当前的代码库有一些注释为实验的类,并在spark 2+中删除。

有没有办法在spark-submit命令中指定只对当前项目使用1.6,以便在安装spark 2+版本时它不会破坏当前项目?

1 个答案:

答案 0 :(得分:0)

spark-submit只是一个客户端。你不应该担心它。

实际上,你可以指定spark-submit命令的“-master”参数来将程序发送到spark 1.6集群,而不是2.x one。