Spark爆炸功能对大数据没有响应

时间:2018-05-31 11:04:11

标签: java scala apache-spark

在我的火花作业数据集中,我有750万条记录,其中一列是List的类型,这个列表的大小可能是100-150。

select explode(listOfString),IMSI,IMEI from temp

所以我确实通过spark explode功能在listOfString列上爆炸,但我的工作是卡住12小时。那我该怎么做。

0 个答案:

没有答案