Question

我正在尝试使用列名从Hbase获取值，下面是我的代码：

val cf = Bytes.toBytes("cf")
val tkn_col_num = Bytes.toBytes("TKN_COL_NUM")
val tkn_col_val = Bytes.toBytes("TKN_COL_VAL")
val col_name = Bytes.toBytes("COLUMN_NAME")
val sc = new SparkContext("local", "hbase-test")
val conf = HBaseConfiguration.create()
conf.set(TableInputFormat.INPUT_TABLE, input_table)
conf.set(TableInputFormat.SCAN_COLUMNS, "cf:COLUMN_NAME cf:TKN_COL_NUM cf:TKN_COL_VAL")
val hBaseRDD = sc.newAPIHadoopRDD(conf, classOf[TableInputFormat], classOf[ImmutableBytesWritable], classOf[Result])
hBaseRDD.map{case (x,y) => (y)}.collect().foreach(println)
val colMap : Map[String,(Int,String)] = hBaseRDD.map{case (x,y) =>
  ((Bytes.toString(y.getValue(cf,col_name))),
    (
      (Bytes.toInt(y.getValue(cf,tkn_col_num))),
      (Bytes.toString(y.getValue(cf,tkn_col_val)))
        ))
}.collect().toMap
colMap.foreach(println)
sc.stop()

现在Bytes.toString(y.getValue(cf,col_name))正常工作，我从表中获得了预期的列名，但Bytes.toInt(y.getValue(cf,tkn_col_num)))给了我一些随机值（我猜它是单元格的偏移值，但我不确定。）。以下是我得到的输出：

(COL1,(-2147483639,sum))
(COL2,(-2147483636,sum))
(COL3,(-2147483645,count))
(COL4,(-2147483642,sum))
(COL5,(-2147483641,sum))

整数值应为1,2,3,4,5。任何人都可以指导我如何获得真正的整数列数据。感谢

如何使用Hbase API getValue方法从Hbase获取Int值

0 个答案: