标签: apache-spark elasticsearch amazon-s3 hdfs
我知道HDFS或S3是在使用Spark Streaming(D-Stream)时进行检查点和状态维护的最佳方式,但无法找到可靠的推理来拒绝ES。在我的情况下,状态不会非常沉重,而且使用时也不会非常频繁。