运行简单的数据融合管道以从Bigquery导出数据并写入GCS

时间:2019-04-26 06:43:35

标签: google-cloud-data-fusion

我尝试使用Google数据融合服务,我创建了一个简单的管道,该管道将从BigQuery中提取数据并将该数据加载回json formate中的GCS中,但是当我运行管道时,出现以下错误。

  

java.io.IOException:com.jcraft.jsch.JSchException:   java.net.ConnectException:连接超时(连接超时)     在   io.cdap.cdap.common.ssh.DefaultSSHSession。(DefaultSSHSession.java:82)   〜[na:na]在   io.cdap.cdap.internal.app.runtime.distributed.remote.RemoteExecutionTwillPreparer.lambda $ start $ 0(RemoteExecutionTwillPreparer.java:429)   〜[na:na]

我提供了所有必要的访问数据融合实例服务帐户的权限。 以下是我提供的访问权限。

BigQuery Admin
Compute Admin
Cloud Data Fusion Admin
Cloud Data Fusion API Service Agent
Dataproc Administrator
Storage Admin
computer network viewer

1 个答案:

答案 0 :(得分:1)

Cloud Data Fusion要求将端口22开放到客户项目上的防火墙。 您可以在项目的防火墙规则中对此进行修改吗?