Spark java.io.IOException：在job中没有指定输入路径

Question

我有以下错误：

java.io.IOException: No input paths specified in job

当我执行以下行时：

val df = sqlContext.read.json("file://home/test.json")

有什么想法吗？

Answer 1

如果您想从本地加载数据，请使用

sqlContext.read.json("file:///home/shankar/test.json")

或只是

sqlContext.read.json("/home/shankar/test.json")

将起作用

如果要从HDFS加载文件

sqlContext.read.json("hdfs:///user/shankar/test.json")

希望这有帮助！