clickhouse-client-插入大量数据会因内存不足而失败

时间:2019-12-11 21:33:06

标签: clickhouse

我有一堆将TSV数据(数百TB)加载到Clickhouse中的过程。

clickhouse-client --host=10.2.5.129 --port=9000 --query=INSERT INTO FS_20191211_0858 FORMAT TSV --send_timeout=30000 --receive_timeout=3000

在某个时刻,我可以看到clickhouse-client在5-10分钟内进行10个并发进程会消耗大约10GB的RAM(驻留),而在几分钟后,操作系统会杀死它们。

是否有任何方法可以限制每个Clickhouse进程的内存?

--max_memory_usage似乎不适用于客户。

0 个答案:

没有答案