如何在python中使用pyspark创建apache配置单元数据库和表?

时间:2018-06-11 13:27:01

标签: hive pyspark

我正在尝试连接到apache hive metastore并使用thrift服务器创建数据库(apache hive在HDP dropbox中)但是在执行spark.sql查询之后,权限是deneid。

以下是我正在使用的代码:

# Using PYSPARK package 
from pyspark.sql import SparkSession 
from pyspark import SparkContext
spark=SparkSession.builder.config("hive.metastore.uris","thrift://172.17.0.2:9083").enableHiveSupport().getOrCreate()
spark.sql('show databases').show() 
spark.sql('show tables').show() 
spark.sql('create database if not exists incepts') 
spark.sql('show databases').show() 
spark.sql('use incepts')

0 个答案:

没有答案