Kafka推荐系统配置

时间:2016-12-07 13:41:21

标签: apache-kafka

我预计我们会在Kafka期间涌入2 TB/day一段时间内加注到2 brokers左右。我打算用2 TB/day设置一个Kafka集群(每个集群在不同的系统上运行)。处理string problem = null; try { problem = "Can't parse a"; var a1 = int.Parse(a); problem = "Can't parse b"; var b1 = int.Parse(b); problem = "Can't parse c"; var c1 = int.Parse(c); problem = "Can't do something"; ... // something } catch(Exception e) { Logger.Add(e); UserMessage(problem); } 的推荐硬件配置是什么?

1 个答案:

答案 0 :(得分:0)

对于Kafka,我不确定是否有特定的配置。至少我可以告诉你一些关于卡夫卡的基本信息。您需要知道每秒获得的消息量,因为这将决定您需要的RAM。确保你有足够的硬盘存储空间。没有必要获得SSD,因为système将首先使用RAM来存储数据。您仍然需要相当速度的硬盘来确保队列的刷新过程不会减慢您的系统速度。

我还建议使用3个kafka经纪人和3个或4个zookeeper服务器。