什么是火花集群部署模式中的旧网关提交?

时间:2016-03-15 11:53:10

标签: apache-spark

我正在执行下面的spark-submit命令。

  dse spark-submit --jars $JARS \
 --executor-memory $EXECUTOR_MEMORY \
 --total-executor-cores $TOTAL_EXECUTOR_CORES \
 --deploy-mode "cluster" \
 --supervise \
 --driver-class-path $JARS_COLON_SEP \
 --class $CLASS_NAME $APP_JAR  

我收到警告

WARN  2016-03-12 09:27:18,651 org.apache.spark.deploy.rest.RestSubmissionClient: Unable to connect to server spark://xx.xx.xx.xx:7077.

Warning: Master endpoint spark://xx.xx.xx.xx:7077 was not a REST server. Falling back to legacy submission gateway instead.

当我使用6066提供主URL时,此警告消失了。据我所知,主URL必须提供端口号6066才能以群集模式部署。

我的问题是

  • 遗留提交网关的含义是什么?
  • 这是否意味着它是以客户端模式提交的,并且监督标志不起作用?

0 个答案:

没有答案