我尝试下载此CSV数据集 https://public.opendatasoft.com/explore/dataset/sirene_v3
我尝试使用Wifi和13Mb以太网断开连接,该连接具有相同的作用:它停止大约1或2 GB。我还尝试使用Python在服务器上直接通过DL(通过Zoe平台)对其进行DL,但它也停止了,我还尝试了分块下载,但仅此而已。
我尝试过:
urllib.request.urlretrieve(url, 'csv.csv')
也尝试过:
response = requests.get(url, stream=True)
handle = open(target_path, "wb")
for chunk in response.iter_content(chunk_size=512):
if chunk:
handle.write(chunk)
使用请求和分块
没有错误,下载就像完成一样停止
答案 0 :(得分:-1)
如果您使用的是Linux,则可以尝试通过wget下载数据集
用法:wget网址
或针对该数据集csv:wget https://public.opendatasoft.com/explore/dataset/sirene_v3/download/?format=csv&timezone=Europe/Paris&use_labels_for_header=true
如果连接中断,则可以使用wget -c url恢复连接
来源: https://www.garron.me/en/bits/wget-resume-continue-broken-download.html