我正在使用datastax cassandra在java中编写一个简单的spark-cassandra程序,但是要低于异常
线程“main”中的异常java.lang.NoClassDefFoundError: com / twitter / chill / KryoBase引起: java.lang.ClassNotFoundException:com.twitter.chill.KryoBase
的pom.xml
<dependency>
<groupId>com.datastax.dse</groupId>
<artifactId>dse-spark-dependencies</artifactId>
<version>5.1.1</version>
<exclusions>
<exclusion>
<groupId>com.datastax.dse</groupId>
<artifactId>dse-java-driver-core</artifactId>
</exclusion>
<exclusion>
<groupId>org.apache.solr</groupId>
<artifactId>solr-solrj</artifactId>
</exclusion>
</exclusions>
</dependency>
App.java
SparkConf conf = new SparkConf().setMaster("local").setAppName("SparkJavaFirst")
.set("spark.cassandra.connection.host", "localhost");
JavaSparkContext sc = new JavaSparkContext(conf);
JavaRDD<CassandraRow> cassandraJavaRDD = CassandraJavaUtil.javaFunctions(sc).
cassandraTable("my_keyspace","my_table" ).
select("my_column");
程序在JavaSparkContext sc = new JavaSparkContext(conf);
任何帮助将不胜感激。
答案 0 :(得分:0)
我删除
的排除后,此问题得到了解决apt-get install apache2.2-common