如何通过Spark SQL作为SnowFlake数据仓库JDBC分布式查询引擎访问RDD表?

时间:2018-11-08 18:08:20

标签: amazon-web-services apache-spark apache-spark-sql snowflake-datawarehouse

嗨,我想从雪花数据库查询我的临时数据库表。

Similary like How to Access RDD Tables via Spark SQL as a JDBC Distributed Query Engine?

有什么方法可以从在AWS上运行的雪花数据库执行此操作吗?

1 个答案:

答案 0 :(得分:1)

仅需确认-您要Snowflake查询Spark创建的RDD吗?

无法从Snowflake连接到Spark并从Snowflake查询Spark RDD 但是您可以从Spark连接到Snowflake,将RDD复制到Snowflake,然后从Spark(例如,使用Utils.runQuery()或直接从Snowflake查询)。

更多信息,例如Snowflake documentation

P.S。雪花是一个词:)