我启动了一个hadoop集群并向主人提交了一份工作。 jar文件仅包含在master中。 hadoop是否在工作开始时将罐子运送到所有从属机器?从机是否有可能与上次运行期间发布的先前版本的代码一起运行?
谢谢你 巴拉
答案 0 :(得分:2)
来自mapreduce教程:
框架将复制必要的内容 文件到从节点之前 该任务的任务就在那里执行 节点。它的效率源于 事实上,文件仅被复制 每个作业一次和缓存的能力 档案馆未归档的档案 从站。
更多信息:
http://hadoop.apache.org/common/docs/current/mapred_tutorial.html