如何使用spark保存cassandra表的输出

时间:2018-03-10 01:11:06

标签: scala cassandra apache-spark-sql cassandra-3.0

我想将从cassandra表读取的输出/行保存为csv或json格式的文件。使用,Spark 1.6.3:

scala>val results.sqlContext.sql("select * from myks.mytable")
scala>val.write.option("header","true").save("/tmp/xx.csv") -- writes to cfs:// filesystem

我无法找到以csvjson格式文件的形式写入操作系统的选项。

感谢任何帮助!

1 个答案:

答案 0 :(得分:0)

使用spark Cassandra连接器将Cassandra表中的数据读入spark

https://github.com/datastax/spark-cassandra-connector/blob/master/doc/0_quick_start.md