flume spoolDir + kafka频道出现编码错误

时间:2015-08-16 08:59:35

标签: apache-kafka flume

我使用了水槽线轴DIR源和KAFKA通道,但是当我尝试从KAFKA读取数据时,我发现了一个奇怪的事情:在一些字符串线的前面添加了一个随机字符。

\10:22:40 53311312321 是的线程否否 ..... s15:22:30 15233223213 飒飒汝非 .... 13:22:30 15233223213 飒飒事情非 ....

编码是U T F-8。 我认为问题在于中文字符,它使用4位写一个。 有人知道吗?

1 个答案:

答案 0 :(得分:-1)

我们使用exec源和kafka频道遇到了同样的情况。

当我们设置

时,条件似乎得到了纠正
parseAsFlumeEvent = true

在频道配置中。

Kafka_flume