从本地计算机读取文件,并使用谷歌数据流写入BigQuery或谷歌存储

时间:2016-08-04 09:03:24

标签: google-bigquery google-cloud-storage google-cloud-dataflow

有没有办法从本地计算机读取csv文件并使用谷歌数据流将其写入大查询或存储?如果存在,应该使用什么样的跑步者?

所有Google数据流示例都是从云中读取并写入云存储或大查询。

我使用DirectPipelineRunner从本地计算机读取并写入本地计算机。

1 个答案:

答案 0 :(得分:2)

DirectPipelineRunner应该适用于此;您可以使用TextIO从本地输入文件中读取并使用BigQueryIO写入BigQuery。