使用Spark Kinesis连接器连接到特定分片

时间:2015-04-17 20:50:25

标签: spark-streaming amazon-kinesis

我正在使用KinesisUtil在Spark应用程序中使用Kinesis流。我正在使用的代码示例使用与Kinesis Stream上的分片数量一样多的“createStream”调用。

有没有办法让KinesisUtil连接到特定的分片?我正在实现一种设计,需要特定的Spark节点处理来自特定分片的事件。

谢谢, Ranjit

0 个答案:

没有答案