在多台计算机上分发大型文件的索引

时间:2015-01-01 13:30:19

标签: java distributed

我想在许多机器上分发大文件(大约1GB)的处理。一种选择是将整个文件存储在所有机器中并从主机传递索引。但是我无法理解我必须在Java中做到这一点。我想这样做主要是为了优化。更具体地说,我希望每台机器处理文件的不同部分并返回结果。问题是文件读取不能从特定行开始,因此在每台机器上必须从头开始读取文件,这将浪费时间,因为处理正在进行多次。可以有任何解决方案吗?

0 个答案:

没有答案