Apache Kafka的Streams API与Spark Streaming

Question

我正在比较火花流和Kafka流的吞吐量。我的结果表明Kafka Streams的吞吐量高于Spark流。它是否正确？不应该反过来吗？

由于

Answer 1

对于每个用例，没有一个流媒体平台普遍比其他流媒体平台更快。不要被比较苹果和橙子的基准测试结果所迷惑（比如从基于磁盘的源读取Kafka Streams和从内存源读取Spark Streaming）。您还没有发布您的测试，但它完全有可能代表Kafka Streams确实更快的用例（和测试环境）。