批处理系统上的Hadoop作为用户进程

时间:2012-02-09 17:45:49

标签: hadoop pbs torque sungridengine

我见过Hadoop-on-Demand,以及SGE上的Hadoop集成。我的理解是需要管理员权限,我在大型集群上没有工作权限。管理员全力以赴,几个月都无法安排我们。

我认识到瞬态虚拟集群对HDFS实用性的限制。我也理解如何使用光泽文件系统,但有人写过SGE或Torque(PBS)脚本来向启动hadoop实例的集群提交作业吗?

1 个答案:

答案 0 :(得分:-1)