在RDD.zip（）操作之后将分区分配到何处

Question

假设我们有一个RDD rddBefore，在某些地图操作后变成rddAfter。 partitionBefore中的一个分区rddBefore对应partitionAfter中的rddAfter。

由于火花可能会在计算过程中降低地点，因此partitionBefore和partitionAfter可以分布在不同的计算机上，例如m1和m2。

在rddBefore.zip(rddAfter)之后，哪台机器(partitionBefore, partitionAfter)会被分发到哪里？

由于

Answer 1

有两种可能的情况：

• 如果父母双方都preferredLocations重叠，这些位置将被用作孩子的首选位置。
• 否则使用preferredLocations的联合（不首选父项）。