为什么RDD没有列在spark UI / storage页面中

时间:2015-07-14 17:50:25

标签: apache-spark rdd

我是Spark的新手。

我在我的mac上安装了Spark 1.3.1,并使用spark-shell玩它,这就是我做的:

scala> val lfile = sc.textFile("/Users/jackzhang/Downloads/ProdPart.txt");
scala> val count = lfile.filter(line => line.contains("XYZ_COW"))
scala> count.count

输出

res27: Long = 1

我也尝试过运行

scala> count.cache

它也不起作用。

我的理解是我应该在内存(或磁盘)中实现count RDD,因为我运行count.count,而countAction Spark Documentation,我应该可以从http://localhost:4040/storage看到它,我错了吗?

0 个答案:

没有答案