使用urllib下载。要求检索URL需要固定的时间

Question

我注意到了这一点。要求urlretrieve（url、fname_和_路径）下载任何小文件需要24秒：

file1   file size: 3336
done in -24.33854389190674  

file2   file size: 19252
done in -24.332698583602905

file3   file size: 62105
done in -24.43064308166504                                

file4   file size: 52405
done in -24.39844298362732 

而请求。get（url）下载相同文件的速度要快得多

file1   file size: 3336
done in -0.10920000076293945 

file2   file size: 19252
done in -0.1716001033782959

file3   file size: 62105
done in -0.3120005130767822    

file4   file size: 52405
done in -0.2652003765106201    

问题是urllib花24秒下载文件的原因是什么？我该如何解决这个问题，让它更快地工作？

Answer 1

尝试使用这里提供的解决方案：python下载速度非常慢。通过将操作分为几个阶段（下载和写入文件），它帮助我加快了检索文件的速度。