使用thrift / avro进行hadoop作业以在Java和C ++之间进行通信

时间:2011-04-21 15:56:04

标签: hadoop protocol-buffers thrift avro

现在我们在Java中有一个使用一些C ++二进制文件的hadoop作业。我们将文件写入NFS和C ++并且Java读取它们,这就是我们的通信形式,这使我们无法扩展。我正在研究Proto Buff,Thrift和Avro以远离NFS的事情。这种方法肯定比NFS方法更好,对吧?

谢谢, 梅格

0 个答案:

没有答案