标签: apache-spark apache-spark-sql
我可以从我自己的代码(在Spark用户界面之外)中从SparkPlanGraph创建DataSet吗?
SparkPlanGraph
DataSet
一些背景:我有一个自定义"报告创建者"创建Spark SQL作业,很好地封装。这些是从网页创建的,我使用explain向用户显示逻辑计划。但是,文本计划并不是非常友好,我希望有一个漂亮的解释可视化,希望类似于Spark UI在 SQL 选项卡中的功能。
explain
我已经通过Spark代码库阅读,但其大部分代码似乎都与Web UI方面有关。