我需要将数据从google bigquery移到elasticsearch实例,为此,我创建了python数据流作业以将bigquery表复制到elasticsearch。但是问题是最近他们在弹性搜索实例上增加了基于IP的限制,因此它仅允许特定的IP范围。
那么,当我使用“ DataflowRunner”选项时如何识别或分配数据流工作者的IP范围?
答案 0 :(得分:0)
在pipeline options中,您可以设置要使用的网络和子网。每个VPC网络都包含子网,每个子网都有一个defined IP range。通过将子网定义为所需的IP范围并在管道选项中设置该子网,可以为工作人员分配IP范围。