Python请求：如何使用自定义API响应正确重试

Question

在我的Django应用程序中，我建立了一个自定义视图，以通过请求库调用Apple的API。我正在将用户的Apple Music歌手（他们的名字）导入我的服务。

这些需要分页的调用有时 会导致500个错误，从而导致整个操作停止。因此，我已经使用this SO answer进行了重试。

这是我的代码：

retry_session函数：

def retry_session(retries, session=None, backoff_factor=0.8, status_forcelist=[500, 502, 503, 504]):
    session = session or requests.Session()
    retry = Retry(
        total=retries,
        read=retries,
        connect=retries,
        backoff_factor=backoff_factor,
        status_forcelist=status_forcelist,
    )
    adapter = HTTPAdapter(max_retries=retry)
    session.mount('http://', adapter)
    session.mount('https://', adapter)
    return session

利用此代码的API代码：（该代码通常有效，除非其中一个响应为500）

# irrelevant code omitted
session = retry_session(retries=5)  # here we use the retry_session above
res = session.get(endpoint+first_batch,headers=headers)
# res = requests.get(endpoint+first_batch,headers=headers)
res_as_dict = json.loads(res.text)

lists_of_artists_to_append = []
fetch_more = True

while fetch_more:
    for i, artist in enumerate(res_as_dict['data']):
        lists_of_artists_to_append.append(res_as_dict['data'][i]['attributes']['name'])

    if res_as_dict.get('next') is not None:
        time.sleep(1)
        res = session.get(endpoint+res_as_dict.get('next')+limit, headers=headers)
        result_headers = res.headers
        print(result_headers)
        res_as_dict = json.loads(res.text)
    else:
        fetch_more = False

return JsonResponse({'artists': lists_of_artists_to_append})

但是，对我的代码的上述修改似乎没有什么不同。单个内部服务错误导致该函数完全不返回。我不确定是否要重试。

当发生类似这样的异常时，Sentry会保存一些上下文，并且我已经从Apple那里看到了这些响应类型：

res_as_dict = {'errors': [
{
'code': '50001', 
'detail': 'Error fetching library content', 
'id': 'ZEZSP3HHFUBDR65S7PEV7GDNLY', 
'status': '500', 
'title': 'Upstream Service Error'
}
]
}

并且：

res_as_dict = {
'errors': [
{
'code': '50000', 
'id': '6BDC2JHOUENBBNJERXFE7LV4FA', 
'status': '500', 
'title': 'Internal Service Error'
}
]
}

我以为我的代码应该捕获并重试这个错误吗？

下面是一个示例请求流，该请求流以此错误结束：

当发生此类错误时，显然'data'键为空，但是为什么在第一个500状态代码之后请求不重试？