无法通过scala导入spark2.1.0中的StreamingContext

Question

我是大数据环境的新手，所以我不太了解，但我已经研究并在我的pom文件中添加了依赖，但我无法创建spark StreamingContext。我附上依赖的图像和下面的错误

• Showing error not found type StreamingContext
• List of dependency i have pasted in my pom file

任何帮助都会有很大的帮助。 我使用的是spark版本2.1.0和scala版本2.11.8

Answer 1

请注意您的进口。

从Spark API我们可以看到：

StreamingContext对象的绝对包路径是

org.apache.spark.streaming.StreamingContext

但是您的图片显示您有此导入模式。

import org.apache.spark._

这就是您的ide无法找到StreamingContext引用的原因。

解决方案很明确，有两种选择：

1. import org.apache.spark.streaming._
2. import org.apache.spark._并在程序中引用 streaming.StreamingContext