加快pentaho中的HBase加载

时间:2018-08-13 10:56:20

标签: hbase pentaho pentaho-spoon pentaho-data-integration pdi

有什么办法可以增加在penthao中将数据加载到HBase表中的速度。现在,我正在使用一个Text file input从目录中读取文件,并使用Hbase output将数据加载到hbase中。

This is my current transformation

有什么办法可以提高加载速度。现在将100万条记录加载到HBase表中需要花费30多分钟的时间。相同的数据仅需7分钟即可通过MySQL Bulk Loader(另一种转换)加载到MySQL表中。

0 个答案:

没有答案