我是水槽和hadoop的新手。我有一个疑问:我们是否可以在不配置hadoop的情况下使用水槽?
任何人都可以分享他们的知识吗?
答案 0 :(得分:4)
是的Flume可以完全独立于hadoop。但是它确实对HDFS有一些包依赖性。如果您不打算使用HDFS接收器,则可以在没有Hadoop的情况下使用它
答案 1 :(得分:0)
是的!至于我最近的水槽配置[source = Twitter,channel = memory],我使用loggerSink来放置流式数据'在文件系统(unix文件目录)的日志文件中,你只需要为数据做一些有意义的事情。作为水槽安装的一部分,还有其他水槽可供使用(HDFSSink,HBaseSink,IRC,文件滚动,检查https://flume.apache.org/FlumeUserGuide.html以获取更多详细信息和用法),或者您可以创建一个新水槽。