问题是,当我想通过spark-submit或sparkR将Rscript提交到我的spark集群时,控制台显示如下:
Error: unexpected input in
Execution halted
条件是我有一个火花集群,并且我在每台服务器上都配置了R,R代码可以在rconsole中运行,但是当我提交r代码时,看起来好像有问题。
这是代码
library(SparkR)
sc <- sparkR.init(master = "local")
sqlContext <- sparkRSQL.init(sc)
localDF <- data.frame(name=c("John", "Smith", "Sarah"), age=c(19, 23, 18))
df <- createDataFrame(sqlContext, localDF)
printSchema(df)
sparkR.stop()