在Mapreduce上执行Hive查询与在Spark上执行Hive之间的区别

时间:2018-07-12 23:22:29

标签: apache-spark hadoop hive

默认情况下,配置单元查询在YARN引擎支持的map reduce上运行。在与hortonworks发行版一起工作时,我们可以使用TEZ作为执行引擎来提高性能。我们也可以在SPARK上运行hive,该SPARK也得到YARN的支持,那么请您详细解释一下在火花执行时使用hive的优点和缺点。关于性能,效率和其他因素。

set hive.execution.engine=spark; 

vs

set hive.execution.engine=mr;

0 个答案:

没有答案