标签: apache-spark apache-spark-sql sparkr
有没有办法在R和Scala脚本之间共享数据,假设两个脚本都针对同一个Spark集群运行?例如,我想使用Scala从源系统中提取数据,我想在R中访问这些数据而不必保留它。
我尝试使用registerTempTable将数据保存在内存中但我似乎无法在另一个脚本中访问它。
答案 0 :(得分:1)
无法做到这一点(在任何会话之间)。您应该将数据写入磁盘。 (hdfs等)