在cloudera上提交hadoop工作

Question

我想知道我们是否可以在亚马逊上设置一个cloudera集群，并从我的本地linux启动hadoop作业而不用ssh进入亚马逊的节点。

有没有像客户这样的沟通？

Answer 1

以下教程的提示确实有用。你应该能够在20分钟内完成一个有效的Hadoop集群，从冷铁到生产就绪，只需要他的指导：

• Hadoop Quickstart: Build a Cluster In The Cloud In 20 Minutes

真的值得一试。

Answer 2

您可以在本地Linux中安装Hadoop客户端，并使用“hadoop jar”命令和您自己的jar。在命令行中指定选项mapred.job.tracker，客户端会将jar推送到jobtracker并将其复制到将用于此作业的所有任务分析器中。