使用代码实现MapReduce实时项目

时间:2014-06-25 07:47:40

标签: mapreduce

我想看一下大mapreduce工作的代码。 请通过实时用例了解真正的mapreduce项目

1 个答案:

答案 0 :(得分:0)

From wikipedia:

  

MapReduce在各种应用程序中都很有用,包括   分布式模式搜索,分布式排序,Web   链接图反转,每个主机的术语向量,Web访问日志统计信息,   倒排索引构造,文档聚类,机器学习,[8]   和统计机器翻译。而且,MapReduce模型具有   已经适应了多核和多核等计算环境   多核系统,[9] [10] [11]桌面网格,[12]志愿者计算   环境,[13]动态云环境,[14]和移动   的环境中。[15]

     

在谷歌,MapReduce用于完全重新生成谷歌的索引   万维网。它取代了旧的特设节目   更新了索引并进行了各种分析。[16]

     

MapReduce的稳定输入和输出通常存储在一个   分布式文件系统。瞬态数据通常存储在本地   磁盘并由Reducer远程提取。

按照链接阅读论文以获取源代码。