显示功能在使用jupyter笔记本的pySpark中不显示输出

时间:2019-05-25 02:07:23

标签: python pyspark stream jupyter-notebook display

请告诉我为什么我的代码没有错误,但是结果没有通过display()函数产生流查询?

这是我读取数据的方式:

streamingInputDF = (`spark.readStream.schema(Schema1).csv("C:/Users/X550/Desktop/sadegh2")

应用模型预先创建:

stream = cvModel.transform(streamingInputDF)

这是查询:

streamPredictions = (stream.groupBy("Survived", "prediction").count().sort("Survived", "prediction")) 

以下是结果:

streamPredictions.isStreaming------->output is True
display(streamPredictions)---------->only show col name without value

0 个答案:

没有答案