如何使用spark将json数据转换为表格式

时间:2016-12-22 10:19:45

标签: json apache-spark spark-dataframe

// 如何使用spark将json数据转换为表格式。

  

块引用

数据集列表= session.read()。json(" /home/a.json")。

1 个答案:

答案 0 :(得分:1)

首先应该创建一个数据框

peopleDF = spark.read.json(your/file/path/)

之后创建虚拟表或视图

peopleDF .createOrReplaceTempView("mytable")
queryResult= spark.sql("SELECT name FROM test )