Spark Standalone集群的最低资源要求是什么?

时间:2018-06-22 15:44:56

标签: apache-spark spark-streaming

我有1个主节点,并且这些节点已注册为工作节点。 我通过使用以下命令启动主节点:-

$./start-master.sh

使用以下命令使两个工作程序节点均得到响应:

$./start-slave.sh spark://master_hostname:7077

我在master_ip:8080看到两个工作人员都已成功注册。

但是当我提交一个火花作业时(有2个执行者,每个执行者1个核心和1GB RAM)。然后它抛出了一些异常,例如

Initial job has not accepted any resources; 
check your cluster uito ensure that workers are registered and have 
sufficient memory"

请建议我我需要更改什么?

谢谢。

0 个答案:

没有答案