hbase completebulkload长时间运行

时间:2019-05-17 14:48:56

标签: hadoop hbase bulk-load

hadoop集群从CDH 4.4升级到CDH 5.7.6,HBASE:0.94-> 1.2.0 在那之后,hbase completebulkload过程的时间从小型表的2小时增加到3-4个,大型表从10小时以上增加。为什么会发生?我应该检查什么?

1 个答案:

答案 0 :(得分:0)

问题出在禁用的块缓存中。如果使用LoadIncrementalHFiles通过代码加载hfile,则它可以正常工作。 https://issues.apache.org/jira/browse/HBASE-10500