在Windows 8.1上启动集群时无法识别spark-ec2

Question

我是一个完全的火花初学者。我正试图在Amazon EC2上运行spark，但我的系统无法识别“spark-ec2”或“./spark-ec2”。它说“spark-ec2”不被认为是内部或外部命令。

我按照here指令启动了一个群集。我想使用Scala，我该如何使它工作？

Answer 1

要在Windows上运行Spark-EC2脚本，您需要Cygwin和Python。如果您不想安装这些程序，可以使用脚本化版本的脚本（https://github.com/edrevo/spark-ec2-docker），这只取决于Docker。