纱线时间轴服务和MR2历史记录服务器之间有什么区别

时间:2019-03-28 07:27:04

标签: hadoop yarn

在hadoop2中,有时间轴服务用于yarn和MRV2历史记录服务器,那么它们之间有什么区别?独立时间轴服务的主要目的是什么?

1 个答案:

答案 0 :(得分:0)

由于Hadoop已从MapReduce转移到其他执行引擎(Spark,Tez,Flink),因此专门针对MapReduce设计的Job History服务器不再起作用。作业历史记录服务器还仅提供已完成作业的统计信息,并且具有/具有可伸缩性问题。应用程序时间轴服务器(ATS)解决了这些问题,并引入了flow的概念,该概念是将一系列作业视为一个实体而不是一组作业(MapReduce)。

无论如何,这是原始意图。您可以在官方文档中阅读更多内容,并且JIRA包含一些设计文档。

参考文献