昨天晚上写了个 Python 程序,下载了一个福利网站 5000 来张妹子图片

2015-08-24 09:48:39 +08:00
 liuxu
github:
https://github.com/liuxu0315/download_nvshen_so

执行:$ python nvshen_so.py

用了多线程, 8 条线程,在 /tmp 下生成 nvshen_so/01 等文件夹并下载到相应的目录。
里面有 2 行代码被注释掉了,它们是配套的,用来下载 2014/12/下的图片,有几百张。

现在有个问题,我的程序无法一次全部下载完,总是漏一点,要么是执行一段时间后就卡死不动了不知道是什么原因。。
当然下载图片前有判断是否有该文件,可以重复执行下载程序,不过这个治标没治本。。
17565 次点击
所在节点    Python
108 条回复
zixianlei
2015-08-24 15:12:55 +08:00
难道楼上就是站长?哈哈^ω^
happywowwow
2015-08-24 15:16:52 +08:00
站长 来了 哈哈哈
wenbinwu
2015-08-24 15:40:28 +08:00
@freaks 你想在 python 里面运行另一个 python ?
wenbinwu
2015-08-24 15:41:05 +08:00
哈哈哈,站长告诉你要 sleep
chanssl
2015-08-24 15:48:40 +08:00
哈哈,笑翻了
Kokororin
2015-08-24 15:55:22 +08:00
好奇站长是怎么找过来的
jonnn
2015-08-24 16:06:37 +08:00
站长找上门来了!
malcolmyu
2015-08-24 16:07:03 +08:00
@fjgwg 爬的都访问不了了
libotony
2015-08-24 16:13:20 +08:00
@fjgwg 站长不哭,已经收藏你的站
wuwuyun
2015-08-24 16:14:45 +08:00
hahahaha 站长哭晕在厕所
idblife
2015-08-24 16:16:18 +08:00
擦,我都是人肉爬虫的。。。

http://qingbuyaohaixiu.com/
flight2006
2015-08-24 16:19:35 +08:00
想起了我的 1024.py
idblife
2015-08-24 16:25:03 +08:00
@flight2006
这位大哥口味够重
话说那么多种图床,好抓吗?
qinglangee
2015-08-24 16:25:29 +08:00
把潜水的站长给逼了出来
ybh37
2015-08-24 16:30:10 +08:00
硬生生的把站长逼出来了啊~
Andy1999
2015-08-24 16:32:31 +08:00
看到站长我笑了 哈哈哈哈
axzy
2015-08-24 17:03:12 +08:00
楼主可以把图片打包提供下载吗
karlxu
2015-08-24 17:04:32 +08:00
@Dongdong36 请教下怎么加代理?
thinkmore
2015-08-24 17:08:24 +08:00
为啥不把链接先趴下来呢
Dongdong36
2015-08-24 17:12:41 +08:00

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://tanronggui.xyz/t/215479

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX