Python - 比较两个文件的最后修改日期,本地和远程

时间:2016-11-21 06:44:09

标签: python

我试图实现一个python脚本,它将比较本地和远程托管文件的最后修改日期。

如果远程文件较新,它应该: - 删除本地文件 - 下载完整修改日期的远程文件

我发现最接近的答案是Last Modified of file downloaded does not match its HTTP header,但我相信这会下载整个文件,因此不会节省太多资源/时间

我想做的只是查看远程文件的标题,而不是下载我认为应该更快的整个文件。

这是我当前的代码,这是非常混乱和noobish(请参阅字符串替换等)我确定有更好/更快的方式 - 你能建议什么?

    remote_source = 'http://example.com/somefile.xml'
    local_source = 'path/to/myfile.xml'
    if path.exists(local_source):
        local_source_last_modified = os.path.getmtime(local_source)
        local_source_last_modified = datetime.datetime.fromtimestamp(local_source_last_modified).strftime('(%Y, %m, %d, %H, %M, %S)')
        conn = urllib.urlopen(remote_source)
        remote_source_last_modified = conn.info().getdate('last-modified')
        remote_source_last_modified = str(remote_source_last_modified)
        remote_source_last_modified = remote_source_last_modified.replace(", 0, 1, 0)", ")")
        if local_source_last_modified < remote_source_last_modified:
            pass
        else:
            headers = urlretrieve(remote_source, local_source)[1]
            lmStr = headers.getheader("Last-Modified")
            remote_source_last_modified = mktime(strptime(lmStr, "%a, %d %b %Y %H:%M:%S GMT"))
            os.utime(local_source, (remote_source_last_modified, remote_source_last_modified))
    else:
        headers = urlretrieve(remote_source, local_source)[1]
        lmStr = headers.getheader("Last-Modified")
        remote_source_last_modified = mktime(strptime(lmStr, "%a, %d %b %Y %H:%M:%S GMT"))
        os.utime(local_source, (remote_source_last_modified, remote_source_last_modified))

1 个答案:

答案 0 :(得分:1)

以防任何人阅读此内容,以下是我最终的结果:

def syncCheck(file_path):
    remote_source = 'http://example.com/' + os.path.basename(file_path)
    local_source = file_path

    headers = {'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/54.0.2840.99 Safari/537.36'}
    response = requests.head(remote_source, headers = headers)
    remote_source_last_modified = response.headers["last-modified"]
    remote_source_last_modified = time.mktime(datetime.datetime.strptime(remote_source_last_modified[:-4], "%a, %d %b %Y %H:%M:%S").timetuple())

    try:
        if os.path.exists(local_source):
            local_source_last_modified = os.path.getmtime(local_source)
            if local_source_last_modified == remote_source_last_modified:
                break
            else:
                try:
                    os.remove(local_source)
                except:
                    break
                urlretrieve(remote_source, local_source)
                os.utime(local_source, (remote_source_last_modified, remote_source_last_modified))

    else:
        urlretrieve(remote_source, local_source)
        os.utime(local_source, (remote_source_last_modified, remote_source_last_modified))

    except HTTPError, e:
        print("HTTP Error: " + str(e.fp.read()))
    except URLError, e:
        print("URL Error: " + str(e.reason))