关于使用hadoop执行多个独立操作

时间:2012-09-17 09:25:49

标签: hadoop

我有几个独立的动作(例如,向外部设备发送命令)并考虑动作计数可以是> 400。 问题:是否可以使用Java中的Hadoop通过在网络中使用多个系统或节点来同时执行这些独立操作?

1 个答案:

答案 0 :(得分:0)

虽然通常不使用hadoop,但有可能在这里你只使用hadoop作为分布式任务执行器。
其中一种方法是使用您想要执行的命令(或您想要执行的任何其他任务描述)创建输入文件,然后使映射器执行它们。
如果你保持每行命令 - 你不需要任何特殊的输入格式 - 默认的文本输入格式就可以了。