标签: hadoop agent cloudera flume
是否可以在Flume代理上指定压缩选项,以便以压缩格式将数据传输到收集器?我知道收集器级别有压缩选项,但是能够从代理传输压缩数据也非常有用。
谢谢!
答案 0 :(得分:2)
Flume拥有您可以使用的gzip和gunzip个装饰器。将gzip装饰器放在代理接收器上,将gunzip装饰器放在收集器接收器上,并在代理和收集器之间传输压缩数据应该正常工作。
gzip
gunzip