我正在寻找一个解决方案,我可以使用zscore和附加模式将我的kafka流式RDD保存到Redis。我们有任何连接器可以做到这一点 - RedisLabs尝试过spark redis连接器,但它只与Scala 2.10兼容。还有一个由Anchormen https://github.com/Anchormen/spark-redis-connector创建的github,但它再次缺少文档,并且maven上也没有jar。
collection.foreachRDD(rdd =>
{
if (!rdd.partitions.isEmpty) {
// save rdd to redis as list with zscore
}
})
所以,请提出任何建议。谢谢,