我想看一下大mapreduce工作的代码。 请通过实时用例了解真正的mapreduce项目
答案 0 :(得分:0)
MapReduce在各种应用程序中都很有用,包括 分布式模式搜索,分布式排序,Web 链接图反转,每个主机的术语向量,Web访问日志统计信息, 倒排索引构造,文档聚类,机器学习,[8] 和统计机器翻译。而且,MapReduce模型具有 已经适应了多核和多核等计算环境 多核系统,[9] [10] [11]桌面网格,[12]志愿者计算 环境,[13]动态云环境,[14]和移动 的环境中。[15]
在谷歌,MapReduce用于完全重新生成谷歌的索引 万维网。它取代了旧的特设节目 更新了索引并进行了各种分析。[16]
MapReduce的稳定输入和输出通常存储在一个 分布式文件系统。瞬态数据通常存储在本地 磁盘并由Reducer远程提取。
按照链接阅读论文以获取源代码。