GraphX磁盘大小不足

时间:2017-02-06 19:04:12

标签: apache-spark spark-graphx

我目前正在使用带有Graphx的Apache Spark,我最近注意到当我运行带有大量数据的应用程序时,应用程序正在使用我的大部分磁盘,例如在我启动程序之前磁盘大约是8 GB和应用程序运行期间,它下降到1 GB,当我关闭应用程序时,磁盘已恢复但未完整。我丢失了一些GB,起初我虽然它与交换内存和日志有关,但是在执行应用程序后我无法找到存储在磁盘上的内容。

有人可以解释为什么会这样吗?

0 个答案:

没有答案