Cassandra Spark Connector的最新版本是什么?基于网站 spark-cassandra-connector 最新版本为1.63 。
基于spark-cassandra-connector上的兼容性矩阵需要 Sparks2的连接器版本2 。那么我们在哪里可以找到Connector 2版本?它出现了吗?
连接器Spark Cassandra Cassandra Java驱动程序 2.0 2.0 2.1.5 *,2.2,3.0 3.0 1.6 1.6 2.1.5 *,2.2,3.0 3.0 1.5 1.5,1.6 2.1.5 *,2.2,3.0 3.0
由于
答案 0 :(得分:2)
2.0版有一个里程碑版本。与Spark 2.0兼容
https://mvnrepository.com/artifact/com.datastax.spark/spark-cassandra-connector_2.11/2.0.0-M3
答案 1 :(得分:0)
我不是sbt或scala人。但基于此我认为这一切都取决于你从(目录)运行sbt命令的位置。如果你已经安装了sbt并且在PATH中你可以从任何地方运行sbt。对我来说,混乱(仍然)是哪个/哪个sbt运行。因为/ sbt目录中有一个sbt文件(你从git获得)。 目标结构是
C:\git\spark-cassandra-connector
\spark-cassandra-connector
\src
\sbt
sbt
我跑的命令终于奏效了:
C:\git\spark-cassandra-connector>sbt assembly
这实际上是per instructions: “在根目录中运行
sbt assembly
将为这两个目录生成一个胖jar:
火花卡桑德拉连接器/目标/ scala- {binary.version} / 火花卡桑德拉连接器的Java /目标/ scala- {binary.version} /
选择前者用于Scala应用程序,后者用于Java。 “
但我只得到了1个jar文件。
我没有(get)spark-cassandra-connector-java /所以最终没有生成java .jar文件(??)
让我们看看它是否有效。