Hadoop Map减少大数据分析的框架

时间:2014-09-23 17:26:21

标签: hadoop mapreduce bigdata

我选择了关于Hadoop Map简化框架的研讨会主题,作为一名初学者,我对它的了解非常少。

我的怀疑如下: -

  1. Job Tracker,Task Tracker是软件还是硬件?
  2. 正如其中一个例子中给出的那样,关于map reduce用于查找某些(例如3个)文件中所有单词的出现,然后你在哪里给出查询,即在地图缩减程序中“查找出现的单词” ?地图如何知道要做什么?

2 个答案:

答案 0 :(得分:3)

  

a)Job Tracker,Task Tracker是软件还是硬件?

两者都是软件。即在集群节点上运行的服务。

  

b)正如其中一个例子中给出的那样,关于map reduce用于查找某些(比如说3个)文件中所有单词的出现,然后你在哪里给出查询,即"查找出现的单词& #34;在地图减少程序?地图如何知道要做什么

除非您使用配置单元,否则没有查询语言。你基本上在Mapper&中实现了你的逻辑。减速机类。

答案 1 :(得分:1)

如果您想为研讨会做准备请参阅Hadoop权威指南,从2章开始。 了解hadoop解决了哪些问题及其架构。 如果你什么都不懂,很乐意帮忙:)