我与Kafka一起使用MapWithState / checkpoint运行SparkSreaming。 Spark作业提交选项如下
`spark-submit --name TEST \
--master yarn \
--deploy-mode client \
--driver-memory 80g \
--executor-memory 80G \
--num-executors 15 \
--executor-cores 15 \
--class com.temp.test.Test\
--conf spark.dynamicAllocation.enabled=false \
/app/TEST-0.0.1-SNAPSHOT.jar 30 \
largest `