如何使用Airflow在DataProcPigOperator中设置区域和区域(Google Cloud Platform)

时间:2017-10-24 06:30:07

标签: google-cloud-platform apache-pig airflow google-cloud-dataproc apache-airflow

我遇到了问题。我将在运行良好之前创建代码DataProcPigOperator,因为默认区域正在运行全局,但我在我的集​​群中更改了asia-easth1代码中的定义区域未运行,因为DataProcPigOperator是默认作业运行全局区域。任何解决方案.. ??

cin >> static_cast<int>(NewGame.this_genre); // doesn't work. 

如何在DataProcPigOperator中设置Region和Zone .. ??

感谢。

1 个答案:

答案 0 :(得分:1)

感谢您提出这一点,将区域字段添加到Pig以及其他一些工作类型,这些工作类型通过此拉取请求省略了它:

https://github.com/apache/incubator-airflow/pull/2788