标签: hadoop mapreduce hive hbase avro
我的Hbase表包含的行包含序列化的avro(使用havrobase放置)和字符串数据。我知道Hive表可以映射到存储在hdfs中的avro数据来进行数据分析,但我想知道是否有人试图将hive映射到包含avro数据的hbase表。基本上我需要能够查询存储在Hbase中的avro和非avro数据,进行一些分析并将结果存储在不同的hbase表中。我还需要能够将其作为批处理作业。我不想编写JAVA MapReduce作业来执行此操作,因为我们不断更改配置,我们需要使用脚本方法。有什么建议?提前谢谢!
答案 0 :(得分:1)
您可以编写HBase协处理器以将avro记录公开为常规HBase限定符。您可以在Intel's panthera-dot