Golang中是否有Apache Beam + Cloud BigTable连接器?

时间:2019-05-08 19:14:34

标签: apache-beam bigtable google-cloud-bigtable apache-beam-io

是否有一种方法可以访问存储在BigTable中的数据作为运行Apache Beam管道的输入源?

1 个答案:

答案 0 :(得分:2)

当前没有为BigTable编写Apache Beam Go SDK IO。

一个人可以基于现有的IO(例如BigQueryIO),但是在Go SDK和运行程序都支持可移植的工作拆分之前,将存在扩展问题,尤其是初始读取的序列化。这项工作正在进行中,但尚无时间表。

另一个即将推出的解决方案是“跨语言IO”,它将允许SDK使用其他语言的IO(特别是让Python&Go使用已经通过生产的Java IO)。

这时,几乎没有时间花在工作/测试Go SDK IO上,并且不保证它们的可靠性或适合性或完成性。