标签: apache-spark apache-spark-sql
我似乎找不到很多关于它的文档,但是当我从Spark SQL中从Hive中提取数据时,它是如何检索模式的,它是否会自动查看Hive Metastore?还有Hive告诉spark查看文件位置以将数据拉入DataFrame吗?它如何处理视图或者它不能处理视图呢?
答案 0 :(得分:4)
使用Hive时,必须构建一个HiveContext 继承自SQLContext,并增加了对查找表的支持 MetaStore和使用HiveQL编写查询