标签: hadoop pbs torque sungridengine
我见过Hadoop-on-Demand,以及SGE上的Hadoop集成。我的理解是需要管理员权限,我在大型集群上没有工作权限。管理员全力以赴,几个月都无法安排我们。
我认识到瞬态虚拟集群对HDFS实用性的限制。我也理解如何使用光泽文件系统,但有人写过SGE或Torque(PBS)脚本来向启动hadoop实例的集群提交作业吗?
答案 0 :(得分:-1)
请参阅MyHadoop:http://www.sdsc.edu/~allans/MyHadoop.pdf