我使用spark-sql来执行大型SQL文件。我想在spark执行之前记录SQL查询,类似于hive verbose模式。我已尝试使用带有-v
参数的spark-sql CLI进行详细说明,但仍然没有打印SQL查询。
spark-sql -v \
<configuration parameters> \
-f abc.sql
Hive命令:
hive -v \
<configuration parameters> \
-f abc.sql
我是否缺少打印SQL查询的其他火花配置?
答案 0 :(得分:0)
spark-sql详细模式为--v
,而hive详细模式为-v
。
下面的命令对我有用 -
spark-sql --v \
<configuration parameters> \
-f abc.sql