使用env vars在Airflow中设置Google Cloud连接

时间:2018-09-19 19:14:32

标签: airflow

如何使用环境变量在Airflow中设置Google Cloud / BigQuery连接参数;从而避免需要登录UI或运行脚本?

1 个答案:

答案 0 :(得分:1)

假设项目位于环境变量b.b1中,则可以进行设置

GOOGLE_CLOUD_PROJECT

理想情况下,Airflow允许默认项目为AIRFLOW_CONN_GOOGLE_CLOUD_DEFAULT=;?extra__google_cloud_platform__project=$GOOGLE_CLOUD_PROJECT AIRFLOW_CONN_BIGQUERY_DEFAULT=;?extra__google_cloud_platform__project=$GOOGLE_CLOUD_PROJECT ,而底层库将对此进行处理