使用PIG脚本将数据加载到HBase

时间:2014-08-05 12:10:42

标签: hbase apache-pig hbasestorage

Yarn,HBase,Hive服务正在HDP 2.1设置(伪分布式模式)上运行。 为了将数据加载到hBase,我使用PIG内置支持(org.apache.pig.backend.hadoop.hbase.HBaseStorage)功能。问题是它在本地模式下工作正常,但在MR模式下运行时,它不会返回任何错误,只是作业失败。甚至约伯的历史也不存在。

我正在'hdfs'用户下运行PIG脚本,并在pig-env.sh中设置了HBASE_HOME的Env.Variable。并将HBASE_JARS / ZOOKEEPER_JARS添加到HADOOP_CLASSPATH。

我甚至遵循了这个,http://hortonworks.com/community/forums/topic/error-reading-file-from-hdfs-and-storing-in-hbase-using-pig/

帮帮我们!!

由于

0 个答案:

没有答案