如何知道保存数据帧后创建的文件数量

Question

我有一个数据框，并使用databricks.spark.csv使用数据框上的save函数将其保存到csv文件。我怎么知道创建了多少个文件（Spark自动划分文件）

Answer 1

+1 for anshul的评论，您可以使用getNumPartitions来获取此rdd的分区数，这将是文件编号。

是的，为什么你需要知道保存的文件号？