我正在HDInsight火花集群上提交火花作业。提交作业时,会抛出以下错误:
17/05/01 13:55:14 WARN客户端:无法连接到服务器: hn0-testsp.a0yxittmcfkubfqkfg1ld1vobc.bx.internal.cloudapp.net/172.18.0.28:8050: 由于超出允许的最大重试次数,重试失败:0 java.net.ConnectException:拒绝连接
这里172.18.0.28是spark headnode IP地址。
以下是带输入参数的命令:
spark-submit --class com.org.stream.spark.CustomKafkaStreamWriter \
--master yarn \
--deploy-mode cluster \
--driver-memory 4g \
--executor-memory 2g \
--executor-cores 1 \
--queue thequeue \
target/sampleproject-SNAPSHOT.jar \
172.18.0.39:2181 172.18.0.35:9092
任何人都可以帮助解决问题吗?