如何使用Python获取网站上.xls文件的文件名(requests-html)

时间:2019-01-24 08:43:18

标签: python excel web-scraping python-requests python-requests-html

我正在尝试从Finnish drug price agency

抓取excel文件

我正在使用request-html查找到excel文件的链接:

from requests_html import HTMLSession
import urllib.request
url = 'http://www.hila.fi/fi/hakeminen_ja_ilmoitukset/viitehintajarjestelma/ryhmat_ja_hinnat/viitehintapaatokset2009'
session = HTMLSession()
r = session.get(url)
sel = 'a[href*=".xls"]'
reference_datas = r.html.find(sel)

for reference_data in reference_datas:
    url = reference_data.absolute_links.pop()
    response = urllib.request.urlopen(url)
    with open('test.xls', 'wb') as f:
        f.write(response.read())

这对于excel文件的内容很好用,但是所选元素没有有关文件名的信息。文件名包含有关文件价格适用期间的信息。例如,链接http://www.hila.fi/c/document_library/get_file?folderId=792534&name=DLFE-4531.xls获取文件Viitehintaluettelo Q4_2009_paivitetty.xls

如何获取此文件名作为字符串,以便从中提取时间信息Q4_2009

1 个答案:

答案 0 :(得分:3)

您可以通过标题访问它。

from requests_html import HTMLSession
session = HTMLSession()
r = session.get('http://www.hila.fi/c/document_library/get_file?folderId=792534&name=DLFE-4531.xls')
content_disposition =  r.headers.get('Content-Disposition')
print(content_disposition)
#  'attachment; filename="Viitehintaluettelo Q4_2009_paivitetty.xls"'

只需从filename解析content_disposition。您可以查看Content-Disposition Spec here