标签: hbase pentaho pentaho-spoon pentaho-data-integration pdi
有什么办法可以增加在penthao中将数据加载到HBase表中的速度。现在,我正在使用一个Text file input从目录中读取文件,并使用Hbase output将数据加载到hbase中。
Text file input
Hbase output
This is my current transformation
有什么办法可以提高加载速度。现在将100万条记录加载到HBase表中需要花费30多分钟的时间。相同的数据仅需7分钟即可通过MySQL Bulk Loader(另一种转换)加载到MySQL表中。
MySQL Bulk Loader