我在制作实时仪表板时出现问题,该仪表板可以显示来自HDFS的日志信息。下面是我的设计草图,我的日志信息是从飞行中生成的,因此我使用Kafka和Streaming Spark来处理它。但是从Streaming Spark导出后,我不知道如何将它可视化到本地网站。你能告诉我这么做吗?
Data input in HDFS --> Kafka --> Streaming Spark --> ? --> Front-end web (d3js,...)
谢谢
P / s:Kafka和Streaming Spark由Ambari服务器管理,HDP 2.4