在python中创建数据流管道,只需使用 apache beam python SDK 从GCP BigTable读取数据/向GCP BigTable写入数据即可。幸运的是,apache-beam根据最新版本提供了写连接器,但是在python中没有读连接器。
计划在python中创建读取连接器,并遵循指南https://beam.apache.org/documentation/io/developing-io-python/进行相同操作,但除此之外,还需要从Bigtable方面考虑哪些 因素 ?
除了可以在python apache-beam管道中执行从Bigtable读取之外,还有其他选择吗?