昨天晚上写了个 Python 程序,下载了一个图片网站 5000 来张图片

以前写的,目前已经失效了。。

----------------------------------------------------------------------------------------------

github: 
https://github.com/liuxu0315/download_nvshen_so 

执行:$ python nvshen_so.py 

用了多线程, 8 条线程,在 /tmp 下生成 nvshen_so/01 等文件夹并下载到相应的目录。 
里面有 2 行代码被注释掉了,它们是配套的,用来下载 2014/12/下的图片,有几百张。 

现在有个问题,我的程序无法一次全部下载完,总是漏一点,要么是执行一段时间后就卡死不动了不知道是什么原因。。 
当然下载图片前有判断是否有该文件,可以重复执行下载程序,不过这个治标没治本。。

原文地址:https://www.cnblogs.com/liuxuzzz/p/5311749.html