将spark数据帧写入ascii JSON

Question

我正在尝试将spark数据帧写为JSON文件;这最终将被写入MapR JSON DB表。

grp_small.toJSON.write.save("<path>")

这似乎是以snappy.parquet格式编写JSON文件。如何强制它将其写为可读的JSON（txt格式）？

Answer 1

您可以将数据框写入json，其中每行包含每行可读json。

grp_small.write.json("path to output")

希望这个肝脏！