热门执行＆＃34; spark-submit＆＃34;对抗远程火花大师？

Question

假设我有一个远程火花群。我可以使用ssh登录远程火花群集主机并使用以下示例运行spark-submit：

$SPARK_HOME/bin/spark-submit /usr/lib/spark2/examples/src/main/python/pi.py

现在我已经在我的笔记本电脑上安装了spark但我没有运行它。 我想在我的笔记本电脑上运行$SPARK_HOME/bin/spark-submit 对抗远程火花群集主机。我该怎么办？

Answer 1

是的，您可以在此命令中提供远程主网址，例如 $SPARK_HOME/bin/spark-submit --master spark://url_to_master:7077 /usr/lib/spark2/examples/src/main/python/pi.py