python异步请求

时间:2018-05-01 07:51:22

标签: python python-requests python-asyncio

所以我有一个图像网址列表,我想用请求库迭代并将所有图像下载到目录。

def get_image(url, image_name):
    path = pathlib.Path('/path/to/some/directory')
    response = requests.get(url, stream=True)
    with open('{}/{}.png'.format(path, image_name), 'wb') as file:
        for block in response.iter_content(1024):
            file.write(block)

for url in urls:
    get_image(url, image_name)

现在,在为特定的异步请求返回响应后,我是否无法创建装饰器以使函数成为回调运行?

1 个答案:

答案 0 :(得分:2)

如果您想要多个并发requests +回调,可以使用enter image description here之类的模块。它与asyncio无关。

asyncio - 即将避免使用回调(以避免grequests)并使异步代码的编写与同步代码一样简单。

如果您决定尝试使用asyncio,则应使用aiohttp callback hell代替requests(这是首选方式)或在线程池中运行requests由asyncio管理。可以找到两种方式的示例client