标签: apache-spark pyspark apache-spark-sql amazon-emr
还有一个待处理的阶段没有被执行,我似乎无法杀死它。
我做了一个简单的小桌子,限制了结果以确保它不会过载(即使我没有限制它也不应该有任何问题)
火花正在AWS EMR上运行 - 已经启动并运行了5天没有问题。
screenshot 1
screenshot 2