我正在使用VoltDB Kafka Importer从Kafka服务器导入数据,我的当前设置在 AWS 中,所有9个节点都具有以下配置
8个vCPU
200 GB硬盘
8 GB RAM
导入速率为每秒 10,000 个记录。
我的问题是,即使其他7个节点仅使用了 20-30%的内存,群集在导入 4200万条记录后会进入只读模式。
我的表和存储过程已分区。我也以1小时的频率启用了自动快照。
我希望有 144 条记录
我应该对配置进行哪些更改以及如何将数据从内存移动到磁盘。
请帮助。