Condor作业 - 将shell脚本作为可执行文件运行

时间:2013-09-09 20:22:16

标签: linux shell condor

我正在尝试运行一个Condor作业,其中可执行文件是一个调用某些Java类的shell脚本。

Universe = vanilla
Executable = /script/testingNew.sh
requirements = (OpSys == "LINUX")
Output =  /locfiles/myfile.out
Log = /locfiles/myfile.log
Error = /locfiles/myfile.err
when_to_transfer_output = ON_EXIT
Notification = Error
Queue

这是/script/testingNew.sh文件的内容 - (只是因为我收到了错误,我现在已经删除了Java命令)

#!/bin/sh
inputfolder=/n/test_avp/test-modules/data/json
srcFolder=/n/test_avp/test-modules
logsFolder=/n/test_avp/test-modules/log
libFolder=/n/test_avp/test-modules/lib
confFolder=/n/test_avp/test-modules/conf
twpath=/n/test_avp/test-modules/normsrc
dataFolder=/n/test_avp/test-modules/data
scriptFolder=/n/test_avp/test-modules/script
locFolder=/n/test_avp/test-modules/locfiles
bakUpFldr=/n/test_avp/test-modules/backupCurrent

cd $inputfolder
filename=`date -u +"%Y%m%d%H%M"`.txt
echo  $filename  $(date -u)

mkdir $bakUpFldr/`date -u +"%Y%m%d"`

dirname=`date -u +"%Y%m%d"`
flnme=current_json_`date -u +"%Y%m%d%H%M%S"`.txt
echo DIRNameis $dirname Filenameis $flnme

cp $dataFolder/current_json.txt  $bakUpFldr/`date -u +"%Y%m%d"`/current_json_$filename
cp $dataFolder/current_json.txt   $filename

mkdir $inputfolder/`date -u +"%Y%m%d"`
echo Creating Directory  $(date -u)

mv $filename $filename.inprocess
echo Created Inprocess file  $(date -u)

此外,这是来自Condor的错误日志 -

000 (424639.000.000) 09/09 16:08:18 Job submitted from host: <135.207.178.237:9582>
...
001 (424639.000.000) 09/09 16:08:35 Job executing on host: <135.207.179.68:9314>
...
007 (424639.000.000) 09/09 16:08:35 Shadow exception!
    Error from slot1@marcus-8: Failed to execute '/n/test_avp/test-modules/script/testingNew.sh': (errno=8: 'Exec format error')
    0  -  Run Bytes Sent By Job
    0  -  Run Bytes Received By Job
...
012 (424639.000.000) 09/09 16:08:35 Job was held.
    Error from slot1@marcus-8: Failed to execute '/n/test_avp/test-modules/script/testingNew.sh': (errno=8: 'Exec format error')
    Code 6 Subcode 8
...

任何人都可以解释导致此错误的原因,以及如何解决此问题? 如果在网络机器上单独执行,则测试新的.shw脚本在Linux机器上运行正常。 多谢!! - GR

2 个答案:

答案 0 :(得分:0)

在我们的例子中,原因是使用DOS行结尾而不是Unix行的shell脚本。

Linux内核很乐意尝试不将脚本提供给/bin/sh(如您所愿),而是/bin/sh 。 (你看到尾随回车符吗?我也没有,但是Linux内核没有。)那个文件不存在,所以作为最后的手段,它会尝试将脚本作为二进制可执行文件执行,因给定错误而失败。

答案 1 :(得分:-1)

您需要将输入指定为:

input   = /dev/null

来源:Submitting a job to Condor