从Spark的优化逻辑计划中获取关系的名称

时间:2019-12-09 15:15:10

标签: scala apache-spark

我在Spark中有以下优化的逻辑计划:

enter image description here

突出显示的部分显示了从csv文件创建的优化查询计划中的LogicalRelation节点,如下所示:

val empDataSet = sparkSession.read.option("delimiter",";").csv("/home/dataset/employees.csv")
  .toDF("emp_no","birth_date","first_name","last_name","gender","hire_date")
  .createOrReplaceTempView("employees")

但是,没有显示我在创建DF时提供的别名或原始csv文件名,而是显示了针对其写有csv的节点。有没有办法从优化计划中获取特定Relation节点的原始文件名或别名?

0 个答案:

没有答案