私房
用 python 爬取了大量美女图片, 桌面壁纸每分钟不重样
废话少说, 直接上代码
这个网站的小姐姐质量都挺不错的, 下载需要会员或者付费下载, 宅男的我很无奈, 只有祭出 Python 大法了
数据接口
"https://tuchong.com/rest/tags/私房/posts?page = 页数 & count=20&order=weekly"
页数为 > 0 的数字
图片高清下载接口
"http://photo.tuchong.com/"+AuthorID+"/f/"+ImageID+".jpg"
AuthorID ImageID 都在第一个接口中能够获取到
获取图册信息
下载图片
构造 URL 爬取大量图片
总结:
请求时加 User-Agent 即可
反爬应对措施
访问速度 同一 ip 每次下载图片暂停 1~2 秒 否则会被禁止访问
有稳定的代理 IP 可考虑多线程, 速度更快
!!!!!!!!
仅供学习交流, 勿用于商业用途
!!!!!!!!
滴滴, 不会爬虫或者需要图片资源的私信我
来源: http://www.jianshu.com/p/1998d60c12f2