用于流式作业的Spark UI

时间:2017-06-03 04:58:52

标签: apache-spark spark-streaming

在spark UI的Streaming选项卡中,我正在查看输出操作ID,第一个是在点击Spark UI的Streaming选项卡中的任何微量链接链接后出现的列 - 它有作业ID号0,1,2 ,3。这是否意味着所有这些工作并行运行?每个作业ID对应于驱动程序代码中的函数调用。或者他们是顺序的?如何从DAG或Spark UI同时运行代码的不同功能?

0 个答案:

没有答案