spark 1.3读取和写入hbase

时间:2017-04-07 08:32:27

标签: apache-spark hbase rdd

我想使用spark 1.3和cloudera CDH-5.4.7从hbase读取和写入。我正在使用spark-hbase-connector。 我开始我的火花壳:

spark-shell --jars hbase-client-1.0.3.jar scalatest_2.10-2.2.4.jar hbase-common-1.0.3.jar spark-hbase-connector_2.10-1.0.3.jar hbase-server-1.0.3.jar

当我运行此导入时:

import it.nerdammer.spark.hbase._

我收到了一个错误。使用spark 1.3从hbase读取和写入的最佳方法是什么? 谢谢

1 个答案:

答案 0 :(得分:0)

你能试试下面的吗?

运行:spark-shell --jars /opt/cloudera/parcels/CDH/lib/hbase/hbase-spark.jar

代码请参考以下链接

https://github.com/apache/hbase/blob/master/hbase-spark/src/main/scala/org/apache/hadoop/hbase/spark/example/hbasecontext/HBaseBulkGetExample.scala