图文视频教学:高清壁纸小程序爬虫,保姆级教程!!!
🌊前言
Code皮皮虾 一个沙雕而又有趣的憨憨少年,和大多数小伙伴们一样喜欢听歌、游戏,当然除此之外还有写作的兴趣,emm…,日子还很长,让我们一起加油努力叭🌈
爬前预热
微信搜索小程序
打开小程序
虽然都是手机壁纸,但是此次爬虫为了入门,所以并不考虑那么多。
那我们就爬取这默认的最新壁纸叭。
爬取分析
打开Fiddler抓包工具
重新进入小程序,在Fiddler中查看请求情况
可以看到有两个请求是蓝色的,那么这个图片到底在那个请求中呢?
那么,哪个请求是我们需要的呢?
小技巧,可以看到两个请求的Body大小差别很大,所以我断定,有图片的请求是Body大的那个
复制JSON数据来到在线JSON解析网站进行解析,得到如下结果
在右边的解析结果里可以看到,有着图片的URL
拿到这些URL,进行访问,就得到了如下图片,哈哈,逻辑已经搞通了,那接下来我们就写代码吧,嘿嘿
遇到的问题
第一次遇到这个问题,咋也不懂,那直接百度!!!(遇事不决就百度,哈哈)
随便点一个进去看看
[OpenSSL.SSL.Error: (‘SSL routines’, ‘tls_process_server_certificate’, ‘certificate verify failed’)](ssl证书问题) - 乔儿 - 博客园 (cnblogs.com)
原因人家已经说的很清楚了,小伙伴们自己看吧😁
该问题的原因是:因为网址使用了https,所以经过代理时会报错。报错原因是:Python3之关闭SSL证书验证
解决办法是:关闭验证SSL证书开关,verify:Ture/False,默认是Ture,用于验证SSL证书开关。例如:requests.get(url=url,headers=headers,verify=False)
视频教学
觉得不错的,球球有一个一键三连哦,哈哈😁
成果展示
出于测试爬了5页
效果不用我多说了吧,这部爽歪歪,既学知识又有高清壁纸,哈哈
美女真是养眼,哈哈🤣
- 点赞
- 收藏
- 关注作者
评论(0)