ReadFromText |从pcollection获取文件路径名

时间:2018-10-03 19:38:34

标签: google-cloud-storage google-cloud-dataflow apache-beam

我正在使用pubsub通知进行云存储,以读取数据流中的新文件。 我启动流传输管道,该管道从pubsub读取,然后返回一个ptransform返回文件路径,然后我尝试ReadFromText,以从文件路径的pcollection中获取输入。但是,它不允许我从pcollection读取路径,似乎它需要一个文件路径开始。 我得到的错误是:

TypeError: _TextSource: file_pattern must be of type string or ValueProvider; got None instead

0 个答案:

没有答案