如何使用Storm为Twitter Streaming编写HDFS bolt

Question

如何将风暴流中的数据写入hdfs 我指的是添加代码TweetTopology.java 第2课 - 第5阶段 - （Twitterfeed需要存储在hdfs中）

你能帮忙写一下hdfs bolt吗。

Answer 1

看看已经实现的HdfsBolt： https://github.com/ptgoetz/storm-hdfs/blob/master/src/main/java/org/apache/storm/hdfs/bolt/HdfsBolt.java

您所要做的就是使用适当/所需的配置进行设置，并将数据写入hdfs。