对内存中的对象使用mapreduce

时间:2014-05-20 16:42:30

标签: java hadoop mapreduce

我是Hadoop的新手,并且地图会减少,我不确定是否有可能。 作为尝试学习Hadoop和map reduce的一部分,我正在尝试编写 一个程序,它是经典单词计数的修改。问题 如下:我在java的内存中有一个字符串数组(由...创建) 扫描仪用于用户输入)。从这个我想运行地图减少单词 计数。这可能吗?从所有hadoop代码我正在研究他们 都是从hadoop文件系统上的文件读取而不是从内存中读取。

我知道我可以将文件写入磁盘,然后将其移至hadoop文件系统 但这将涉及很多文件io,这是我想避免的。

非常感谢任何帮助。

0 个答案:

没有答案