我们是否需要将spark二进制包上传到http / s3 / hdfs

Question

我正在尝试在mesos群集上运行spark-shell。

从this documentation，我们需要将spark二进制程序包上传到Mesos可用的位置。

我们是否仅提供直接链接（可以从其中下载Spark软件包）到spark.executor.uri？当前：http://apache.mediamirrors.org/spark/spark-2.4.0/spark-2.4.0-bin-hadoop2.7.tgz

Answer 1

如果Mesos代理可以访问公共互联网，那应该可以。不利之处可能是下载时间较慢等。