用python下载大文件的最佳方法

Question

哪个库/模块最适合在速度，内存，CPU方面下载大型500mb +文件？我也在考虑使用pycurl。

Answer 1

当大小为500MB时，人们不得不担心数据完整性，并且HTTP的设计并未考虑数据完整性。

我宁愿使用python绑定来实现rsync（如果它们存在），甚至是bittorrent，它最初是在python中实现的。 rsync和bittorrent都解决了数据完整性问题。