Question

我的Riak-Spark连接器不起作用。

我可以用：

启动Spark

    /opt/spark/bin/spark-shell \
    --jars com.fasterxml.jackson.module_jackson-module-scala_2.11-2.4.4.jar \
    --conf spark.riak.connection.host=127.0.0.1:8087 \
    --packages com.basho.riak:spark-riak-connector_2.11:1.6.3

但是当我跑步时：

    import com.basho.riak.spark._
    val data = Array(1, 2, 3, 4, 5)
    val testRDD = sc.parallelize(data)

我收到了错误：

    scala> import com.basho.riak.spark._

    scala> val data = Array(1, 2, 3, 4, 5)
    data: Array[Int] = Array(1, 2, 3, 4, 5)

    scala> val testRDD = sc.parallelize(data)
    java.lang.VerifyError: class com.fasterxml.jackson.module.scala.ser.ScalaIteratorSerializer overrides final method withResolved.(Lcom/fasterxml/jackson/databind/BeanProperty;Lcom/fasterxml/jackson/databind/jsontype...

任何人都可以帮忙安装和使用此连接器???

非常感谢， Ĵ

Answer 1

我想我设法清理了我的罐子，现在似乎通过了这一点。无论如何还是Tks。 Ĵ

riak spark连接器不起作用

1 个答案: