Hadoop：用于可视化关键值数据和文件以进行开发的工具

Question

是否有任何简单易用的java工具可用于显示地图缩减工作目录中的键/值数据？

具体来说，我想浏览20个作业地图缩小工作流程，贴上单个文件并查看数据，甚至可能会看到文件大小的直方图。

• 这里有一些注意事项，例如 -

  • 某些文件包含序列化数据（不仅仅是文本）
  • 显然，这个系统在“云规模”中使用可能是愚蠢的，而不是它的开发工具。

然而，这样的工具可用于开发和本地调试大型连接的m / r管道。

这是出于开发目的（我不是试图在真实集群中可视化分布式键/值hadoop数据）。

Answer 1

结帐KarmaSphere Studio

  

逐步监控作业执行
    - 带结果的工作流程：显示MapReduce作业每一步的结果输出     - 桌面上的Hadoop日志：轻松地从桌面访问Hadoop日志     - 作业失败选项：允许指定作业失败选项，例如在EMR作业失败时自动调用指定的脚本。