Hive和Hadoop MapReduce之间的关系?

时间:2016-11-09 15:44:52

标签: hadoop hive mapreduce hdfs

是否有任何Hive内部流程可以连接以减少或映射任务?

添加到那个!

  • Hive如何与MapReduce相关工作?
  • 如何安排工作?
  • 查询结果如何返回到配置单元驱动程序?

1 个答案:

答案 0 :(得分:5)

对于HIVE,没有直接沟通Map / Reduce任务的流程。它与Jobtracker(YARN中的Application Master)进行通信(流程6.3),仅在作业处理相关的事情发生后进行通信。


这张图片将清楚地了解,

  
      
  1. HIVE如何使用MapReduce作为执行引擎?
  2.   
  3. 如何安排工作?
  4.   
  5. 结果如何返回驱动程序?
  6.   

Hive design

dennis-jaheruddin建议

编辑

  

Hive通常通过HQL(Hive查询语言)进行控制   通常很方便地缩写为Hive。

source