Spark在WordCount上的设备上没有剩余空间

Question

我在使用部署模式客户端的单节点独立群集上执行WordCount时遇到无磁盘空间问题。

文件大小为50gb＆amp;我的系统有30+ gb的Ram＆amp; 1000GB安装盘。

{
    "id": 91
    "name": "Potato Salad"
    "ingredient": [5, 6]
}

Answer 1

问题是我在spark目录下更改的空间：

1. tmp目录
2. 工作目录
3. 仓库目录

最初是使用root，我已经将其更改为已安装磁盘的路径。