跨R和Scala脚本访问数据

时间:2015-09-23 20:05:09

标签: apache-spark apache-spark-sql sparkr

有没有办法在R和Scala脚本之间共享数据,假设两个脚本都针对同一个Spark集群运行?例如,我想使用Scala从源系统中提取数据,我想在R中访问这些数据而不必保留它。

我尝试使用registerTempTable将数据保存在内存中但我似乎无法在另一个脚本中访问它。

1 个答案:

答案 0 :(得分:1)

无法做到这一点(在任何会话之间)。您应该将数据写入磁盘。 (hdfs等)