Python:如何使用字节范围下载文件?

时间:2014-02-14 09:46:05

标签: python python-2.7 http-headers http-protocols

我想以多线程模式下载文件,我在这里有以下代码:

#!/usr/bin/env python

import httplib


def main():
    url_opt = '/film/0d46e21795209bc18e9530133226cfc3/7f_Naruto.Uragannie.Hroniki.001.seriya.a1.20.06.13.mp4'

    headers = {}
    headers['Accept-Language'] = 'en-GB,en-US,en'
    headers['Accept-Encoding'] = 'gzip,deflate,sdch'
    headers['Accept-Charset'] = 'max-age=0'
    headers['Cache-Control'] = 'ISO-8859-1,utf-8,*'
    headers['Cache-Control'] = 'max-age=0'
    headers['User-Agent'] = 'Mozilla/5.0 (Windows NT 5.1)'
    headers['Connection'] = 'keep-alive'
    headers['Accept'] = 'text/html,application/xhtml+xml,application/xml,*/*'
    headers['Range'] = ''

    conn = httplib.HTTPConnection('data09-cdn.datalock.ru:80')
    conn.request("GET", url_opt, '', headers)

    print "Request sent"

    resp = conn.getresponse()
    print resp.status
    print resp.reason
    print resp.getheaders()

    file_for_wirte = open('cartoon.mp4', 'w')
    file_for_wirte.write(resp.read())

    print resp.read()

    conn.close()


if __name__ == "__main__":
    main()

这是输出:

Request sent
200
OK
[('content-length', '62515220'), ('accept-ranges', 'bytes'), ('server', 'nginx/1.2.7'), ('last-modified', 'Thu, 20 Jun 2013 12:10:43 GMT'), ('connection', 'keep-alive'), ('date', 'Fri, 14 Feb 2014 07:53:30 GMT'), ('content-type', 'video/mp4')]

此代码工作正常,但我不明白如何使用范围下载文件的文档。如果您看到响应的输出,则服务器提供:

 ('content-length', '62515220'), ('accept-ranges', 'bytes')

它支持“字节”单位的范围,其中内容大小为62515220

但是在此请求中整个文件已下载。但是我想要做的是首先获取服务器信息,例如使用http范围查询和文件的内容大小而不下载可以支持此文件吗?我如何创建范围的http查询(即:0~25000)?

1 个答案:

答案 0 :(得分:14)

Range标题与bytes=start_offset-end_offset作为范围说明符传递。

例如,以下代码检索前300个字节。 (0-299):

>>> import httplib
>>> conn = httplib.HTTPConnection('localhost')
>>> conn.request("GET", '/', headers={'Range': 'bytes=0-299'}) # <----
>>> resp = conn.getresponse()
>>> resp.status
206
>>> resp.status == httplib.PARTIAL_CONTENT
True
>>> resp.getheader('content-range')
'bytes 0-299/612'
>>> content = resp.read()
>>> len(content)
300

注意 start_offsetend_offset都包含在内。

<强>更新

如果服务器不理解Range标头,它将使用状态代码200(httplib.OK)而不是206(httplib.PARTIAL_CONTENT)进行响应,并且它将发送整个内容。要确保服务器响应部分内容,请检查状态代码。

>>> resp.status == httplib.PARTIAL_CONTENT
True