我的Cloudera quickstart CDH 5.15集群非常慢 当我运行一个简单的hadoop命令(例如“ hadoop fs -ls”)时,将花费将近20秒 但是当我尝试使用像“ ls”之类的runnnig本地命令时,速度非常快,请为此提供帮助。
答案 0 :(得分:2)
快速入门VM需要6-8 GB的RAM才能可靠地工作。
但是,与其他以类似方式运行的内置shell命令相比,任何hadoop命令的JVM启动过程都将慢得多。无法解决这个事实。
如果您希望更快地使用Hadoop ls命令,那么为Namenode进程设置一个具有足够内存的实际分布式集群将是有益的,ls
与之联系