标签: google-bigquery apache-beam apache-beam-io
在this answer之后,我想知道Apache Beam Python SDK的WriteToBigQuery和BigQuerySink之间的主要区别(如果有)。
WriteToBigQuery
BigQuerySink
相互使用有什么考虑或限制?
答案 0 :(得分:2)
正在寻找at sources:
BigQuerySink触发BigQuery的数据流本机接收器 仅支持批处理管道。代替使用这个水槽 直接,请使用适用于两者的WriteToBigQuery转换 批处理和流传输管道。
他们俩似乎都在下面做similar thing。