我有1个主节点,并且这些节点已注册为工作节点。 我通过使用以下命令启动主节点:-
$./start-master.sh
使用以下命令使两个工作程序节点均得到响应:
$./start-slave.sh spark://master_hostname:7077
我在master_ip:8080看到两个工作人员都已成功注册。
但是当我提交一个火花作业时(有2个执行者,每个执行者1个核心和1GB RAM)。然后它抛出了一些异常,例如
Initial job has not accepted any resources;
check your cluster uito ensure that workers are registered and have
sufficient memory"
请建议我我需要更改什么?
谢谢。