如何在spark-submit命令中指定spark版本1.6? 我们目前有火花1.6。我们公司计划很快升级火花。当前的代码库有一些注释为实验的类,并在spark 2+中删除。
有没有办法在spark-submit命令中指定只对当前项目使用1.6,以便在安装spark 2+版本时它不会破坏当前项目?
答案 0 :(得分:0)
spark-submit只是一个客户端。你不应该担心它。
实际上,你可以指定spark-submit命令的“-master”参数来将程序发送到spark 1.6集群,而不是2.x one。