Cloudera快速入门CDH 5.15集群运行缓慢

时间:2018-10-30 20:59:42

标签: hadoop cloudera-cdh cloudera-quickstart-vm

我的Cloudera quickstart CDH 5.15集群非常慢 当我运行一个简单的hadoop命令(例如“ hadoop fs -ls”)时,将花费将近20秒 但是当我尝试使用像“ ls”之类的runnnig本地命令时,速度非常快,请为此提供帮助。

1 个答案:

答案 0 :(得分:2)

快速入门VM需要6-8 GB的RAM才能可靠地工作。

但是,与其他以类似方式运行的内置shell命令相比,任何hadoop命令的JVM启动过程都将慢得多。无法解决这个事实。

如果您希望更快地使用Hadoop ls命令,那么为Namenode进程设置一个具有足够内存的实际分布式集群将是有益的,ls与之联系