我安装了火花。预编译和独立。但两者都无法运行val conf = new SparkConf()
。错误是error: not found: type SparkConf
:
scala> val conf = new SparkConf()
<console>:10: error: not found: type SparkConf
预编译的是spark 0.9.1和Scala 2.10.3 独立的是Spark 1.0.1和Scala 2.10.4 对于独立的,我用scala 2.10.4编译它 非常感谢您的帮助
答案 0 :(得分:16)
正如我们在评论中指出的那样,您的代码缺少适当的import语句:
import org.apache.spark.SparkConf