Twitter热门标签关于Apache Spark

Question

我是apache spark的新手。我试图运行https://github.com/prabeesh/SparkTwitterAnalysis/tree/0.2.0示例，但控制台给出了以下错误：

 WARN scheduler.TaskSchedulerImpl: Initial job has not accepted any resources; check your cluster UI to ensure that workers are registered and have sufficient memory

我已经使用nc -lk 9999启动了服务器，并且已经通过sbt / sbt package编译了代码
并使用sbt / sbt 'run spark://localhost:9999 <keys as specifies> hashtag'

对代码进行了审核

此错误的原因是什么以及如何解决

提前致谢。

Answer 1

如消息中所述，您的工作人员未在群集中注册，或者他们没有足够的内存来运行您的任务。从浏览器转到集群UI页面，确保正​​确配置了工作节点。如果节点正在工作，那么尝试增加它们的可用内存。