pyspark,worker.py和daemon.py的原理?

时间:2016-05-26 03:29:25

标签: python apache-spark pyspark

worker.py可以daemon.py单独工作吗?

daemon.py首先启动。 daemon.py管理worker.py。在具有两次以上shuffle操作的spark应用程序中,在一次shuffle之后,daemon.py和worker.py会发生什么?

0 个答案:

没有答案