apache beam中的左连接操作

Question

我有两个带有公共键列的数据集，我想执行左连接操作。 apache beam中是否有任何相应的函数在apache beam中执行左连接操作？

Answer 1

Beam Java SDK中有一个小型连接库，请查看该实现是否适用于您：org.apache.beam.sdk.extensions.joinlibrary.Join，source

更新

您可以使用CoGroupByKey类似的方法自行实施：{   - 将PCollections放入KeyedPCollectionTuple;
  - 应用CoGroupByKey，每个窗口每个键对PCollections个元素进行分组;
  - 应用ParDo循环遍历CoGroupByKey的结果，一次加入左右记录，并发出结果（请参阅CoGroupByKey example in the Beam Programming Guide）;