标签: hadoop flume flume-ng
Flume有一个名为Sequence Generator的来源,可用于测试;它只是生成随机数据(递增数字)。
我正在使用它进行测试/调试,但它可以非常快速地生成大量数据。如何让它每秒生成更少量的数据?
答案 0 :(得分:0)
Flume目前没有提供任何此类配置。
要降低数据频率,您可以将batchSize参数配置为更高的值
batchSize
或更好的方法是编写自己的水槽来源,如SequenceGeneratorSource