如何更改运行google dataprep的数据流作业的区域/区域

Question

我可以在google dataprep中设置生成数据流作业的区域吗？例如，我正在将欧洲存储桶中的CSV数据转换为欧洲的BigQuery数据集。但是数据流作业在US-central-1中运行，并不好。

提前帮助你。

Answer 1

在撰写本文时，Google Cloud DataPrep目前只能在爱荷华州（us-central-1）运行。结果来自： https://cloud.google.com/dataprep/pricing

按区域访问产品可在以下链接中查看，但目前尚未列出DataPrep Beta。 https://cloud.google.com/about/locations/

Answer 2

您可以使用dataprep应用上的个人资料页面更改DataPrep作业的运行位置：https://clouddataprep.com/profile（右上角的用户图标，而不是点击您的帐户名称） 在这里您可以找到用于：

的桶

• 上传目录
• 作业运行目录
• 临时目录

将它们更改为自定义区域，在您首选的区域创建存储桶。

Answer 3

Cloud Dataprep使用下面的Cloud Dataflow服务。此服务可以在多个位置运行。实际上，当您提交Cloud Dataflow作业时，可以使用--region选项为作业管理和执行指定区域端点。在上述文件中，“爱荷华州”代表一个下拉菜单，提供除爱荷华本身以外的其他选择，例如：伦敦，比利时和欧洲的法兰克福。

Answer 4

按照@ markov00的建议，将以下目录更改为我自己的EU目录对我来说很有效

• 上传目录
• 作业运行目录
• 临时目录