Spark在创建数据帧后动态传递id

时间:2017-02-17 07:34:24

标签: scala apache-spark

除了客户之外,我有近20个身份证。我的问题是在数据(阅读)

之上创建数据帧
val id = 88888
val df = inputDataDF.filter($"id" === id).join(....)

我知道数据帧是不可变的,但有没有办法动态传递id。因为对于Ist id,我将缓存所有数据帧,以便第二个id性能得到改善......

0 个答案:

没有答案