运行python脚本时出现Nifi问题

时间:2019-07-26 10:15:17

标签: python google-cloud-platform google-bigquery bigdata apache-nifi

我的用例是: 我有2013-2019年的出租车数据,我想获取2018年的数据 从Bigquery到Google云存储,再到Amazon S3存储桶。

我已经编写了一个python脚本,它已成功将数据传输到Google Cloud Storage存储桶。

此外,我进行了nifi流程,该流程已将GCP存储桶数据成功传输到Amazon S3。

问题是我无法在nifi中创建流程,当我的python脚本成功执行时,流程(我已经创建)被触发。 基本上我无法连接(运行python脚本)和(nifi流)。 我想使其自动化。

0 个答案:

没有答案