我想从python脚本创建数据流模板

时间:2019-11-27 09:25:56

标签: google-cloud-dataflow

我找到了这个script,我想从中创建一个数据流模板,但我不知道如何。我还发现了此命令python -m examples.mymodule \ --runner DataflowRunner \ --project YOUR_PROJECT_ID \ --staging_location gs://YOUR_BUCKET_NAME/staging \ --temp_location gs://YOUR_BUCKET_NAME/temp \ --template_location gs://YOUR_BUCKET_NAME/templates/YOUR_TEMPLATE_NAME 创建和暂存模板的过程,但这确实让我感到困惑。

2 个答案:

答案 0 :(得分:0)

您可以查看https://cloud.google.com/dataflow/docs/guides/templates/creating-templates,了解如何创建Python Dataflow模板。

答案 1 :(得分:0)

首先,您必须准备要用作模板的脚本,为此,您可以按照@JayadeepJayaraman [1]提供的链接。

关于python命令,它将允许您在此参数“ -template_location ”和“ examples.mymodule ”中选择的存储区中创建并存储模板>”是您要为其创建模板的 package.name_script 的路径。

[1] https://cloud.google.com/dataflow/docs/guides/templates/creating-templates