如何计算Spark DataFrames中的shuffle分区的最佳值

Question

如何在Spark whit DataFrame配置中计算分区数量和spark.conf.set的大小之间的权衡？