保存/导出Spark SQL Zeppelin查询的结果

时间:2016-09-07 00:55:36

标签: apache-spark-sql apache-zeppelin

我们正在使用apache zeppelin来分析我们的数据集。我们有一些我们想要运行的查询,这些查询具有从它们返回的大量结果,并且希望在zeppelin中运行查询但保存结果(显示限制为1000)。是否有一种简单的方法可以让zeppelin将查询的所有结果保存到s3存储桶中?

1 个答案:

答案 0 :(得分:6)

我设法使用scala解释器制作了一个有效地完成我想要的笔记本。

*

值得一提的是,z.load函数似乎对我有用了一天,但后来又尝试了它,由于某种原因我必须在自己的段落中用%dep解释器声明它,然后剩下的代码在标准的scala解释器