在Kafka中,是否可以针对一个主题复制选择性分区?

时间:2018-07-17 06:11:40

标签: java apache-kafka bigdata hadoop2

据我了解,我们可以在主题级别进行复制,其中主题的所有分区将在整个集群中复制。但是我们只能控制主题中选择性分区的复制吗?

1 个答案:

答案 0 :(得分:0)

不。从doc

  

Kafka跨一个目录复制每个主题分区的日志   可配置的服务器数量(您可以在   逐个主题)。

如果您考虑Kafka的设计,什么是主题和分区,这很有意义:

  • 主题是消息的流或类别,因此这是一种根据消息的类型和内容来组织消息的方法
  • 分区基本上是一种处理平滑分布的概念。它们基于密钥,但是最初的想法是在一个主题的所有分区上平均划分您的消息。它并不是为组织业务用途而组织消息的真正目的,而是出于体系结构约束的目的。