对于Pi示例，Spark无休止地运行

Question

我刚刚设置了Spark并运行了命令

spark-shell --master yarn-client --driver-memory 512m --executor-memory 512m

然而，它只是无休止地打印出像

这样的消息

16/04/25 17:34:46 INFO Client: Application report for application_1460481694166_0125 (state: ACCEPTED)

我在某处读到了我可以尝试kill该应用程序。但我不确定是什么

当我尝试

时

yarn application -list

我看到了

            Application-Id      Application-Name        Application-Type          User           Queue                   State             Final-State             Progress                        Tracking-URL
application_1460481694166_0118  org.apache.spark.examples.SparkPi                     SPARK           root         default                ACCEPTED               UNDEFINED                   0%                                 N/A
application_1460481694166_0124           Spark shell                   SPARK          root         default                ACCEPTED               UNDEFINED                   0%                                 N/A
application_1460481694166_0120           Spark shell                   ...
          Zeppelin                   SPARK      zeppelin         default                 RUNNING               UNDEFINED                  10%               http://10.0.2.15:4040
application_1460481694166_0117  org.apache.spark.examples.SparkPi                     SPARK           root         default                ACCEPTED               UNDEFINED                   0%                                 N/A
application_1460481694166_0123           Spark shell                   

...

我不确定Zeppelin出现的原因是因为我在网络浏览器中关闭了它

我现在需要做什么？

Answer 1

即使您关闭了浏览器，我也猜测Zeppelin仍然在运行。关闭浏览器与停止托管过程不同。停止托管过程在启动该过程的CLI选项卡中完成。作为最后一个沟渠，您可以在任何选项卡中使用纱线应用程序 - 终止任何正在运行的流程。

yarn application -kill application_1460481694166_0118

这会杀死（第一个）火花应用程序。