我在Spark中有以下优化的逻辑计划:
突出显示的部分显示了从csv文件创建的优化查询计划中的LogicalRelation
节点,如下所示:
val empDataSet = sparkSession.read.option("delimiter",";").csv("/home/dataset/employees.csv")
.toDF("emp_no","birth_date","first_name","last_name","gender","hire_date")
.createOrReplaceTempView("employees")
但是,没有显示我在创建DF时提供的别名或原始csv文件名,而是显示了针对其写有csv
的节点。有没有办法从优化计划中获取特定Relation
节点的原始文件名或别名?