我正在运行Python命令+ API来访问ECMWF(欧洲中等天气预报中心)数据服务器(称为MARS)并下载一些文件(天气数据)。我使用shell(我使用csh)在shell中执行./python_script.py
来启动Python代码
如果我下载单个文件(1999年在我的脚本中使用range(1999, 2000)
,而不是在下面的Python脚本失败示例中使用range(1998, 2000)
),它运行正常。现在我想下载其中的许多内容,从而制作一个循环多年。
我的问题是,Python脚本似乎没有等待shell命令/ API完成并在下一年继续。它会导致错误。该文件已生成但大小为零。
我想知道我是否可以指定Python脚本等待在shell窗口中找到一些关键字,然后再继续执行下一个/ loop步骤。
我知道我在这种情况下使用了一些特定的API,并且可能会找到另一种特定于API的解决方案,但我觉得在shell中识别一些打印输出似乎更容易。
可能是例如"转移率"它似乎只在作业完成时出现在shell窗口中,请参阅我从shell保存的日志(最后成功的行)(./python_script.py >& log_file.log
。
我的PYTHON代码是:
#!/usr/bin/env python
for year in range(1998, 2000):
from ecmwfapi import ECMWFDataServer
server = ECMWFDataServer()
server.retrieve({
"class": "e2",
"dataset": "era20c",
"date": '%d-07-01/%d-07-02' % (year,year),
"domain": "g",
"area" : "12/-72/-67/22",
"grid" : "1.0/1.0",
"expver": "1",
"param": "214.140/233.140",
"step": "3/9/15/21",
"format" : "netcdf",
"stream": "wave",
"target": '/home/nicolas/hycom/hycom_data/ECMWF/ERA20C/forecast/%d/test_era20c_wave_set1.nc' % (year),
"time": "06",
"type": "fc",
})
我的日志最后一行只下载(成功):
2016-02-13 16:00:21 Request is complete
2016-02-13 16:00:21 Transfering 239.441 Kbytes into /home/nicolas/hycom/hycom_data/ECMWF/ERA20C/forecast/1999/test_era20c_wave_set1.nc
2016-02-13 16:00:21 From http://stream.ecmwf.int/data/atls04/data/data01/scratch/_grib2netcdf-atls04-95e2cf679cd58ee9b4db4dd119a05a8d-JLUk0w.nc
2016-02-13 16:00:28 Transfer rate 32.6278 Kbytes/s
答案 0 :(得分:1)
没有必要在循环中导入,也可能是unntaiton问题。如果您的脚本与您提供的一样,则retrieve
不在循环中。 python中的缩进非常重要。
尝试以这种方式重写脚本:
#!/usr/bin/env python
from ecmwfapi import ECMWFDataServer
server = ECMWFDataServer()
for year in range(1998, 2000):
server.retrieve({
"class": "e2",
"dataset": "era20c",
"date": '%d-07-01/%d-07-02' % (year,year),
"domain": "g",
"area" : "12/-72/-67/22",
"grid" : "1.0/1.0",
"expver": "1",
"param": "214.140/233.140",
"step": "3/9/15/21",
"format" : "netcdf",
"stream": "wave",
"target": '/home/nicolas/hycom/hycom_data/ECMWF/ERA20C/forecast/%d/test_era20c_wave_set1.nc' % (year),
"time": "06",
"type": "fc",
})