图文视频教学:高清壁纸小程序爬虫,保姆级教程!!!

举报
Code皮皮虾 发表于 2021/10/25 15:16:58 2021/10/25
【摘要】 图文视频教学:高清壁纸小程序爬虫,保姆级教程!!!

🌊前言

Code皮皮虾 一个沙雕而又有趣的憨憨少年,和大多数小伙伴们一样喜欢听歌、游戏,当然除此之外还有写作的兴趣,emm…,日子还很长,让我们一起加油努力叭🌈



爬前预热

微信搜索小程序

image-20211009164650712

打开小程序

虽然都是手机壁纸,但是此次爬虫为了入门,所以并不考虑那么多。

那我们就爬取这默认的最新壁纸叭。

image-20211009164813899


爬取分析

打开Fiddler抓包工具

image-20211009165632577

重新进入小程序,在Fiddler中查看请求情况

可以看到有两个请求是蓝色的,那么这个图片到底在那个请求中呢?

image-20211009165725106

那么,哪个请求是我们需要的呢?

小技巧,可以看到两个请求的Body大小差别很大,所以我断定,有图片的请求是Body大的那个

image-20211009165818317

image-20211009165948272

复制JSON数据来到在线JSON解析网站进行解析,得到如下结果

在右边的解析结果里可以看到,有着图片的URL

image-20211009170003375

拿到这些URL,进行访问,就得到了如下图片,哈哈,逻辑已经搞通了,那接下来我们就写代码吧,嘿嘿

image-20211009170113899


遇到的问题

image-20211009170335716

第一次遇到这个问题,咋也不懂,那直接百度!!!(遇事不决就百度,哈哈)

image-20211009170428969

随便点一个进去看看

[OpenSSL.SSL.Error: (‘SSL routines’, ‘tls_process_server_certificate’, ‘certificate verify failed’)](ssl证书问题) - 乔儿 - 博客园 (cnblogs.com)

原因人家已经说的很清楚了,小伙伴们自己看吧😁

该问题的原因是:因为网址使用了https,所以经过代理时会报错。报错原因是:Python3之关闭SSL证书验证

解决办法是:关闭验证SSL证书开关,verify:Ture/False,默认是Ture,用于验证SSL证书开关。例如:requests.get(url=url,headers=headers,verify=False)

image-20211009170536259



视频教学

B站视频地址

觉得不错的,球球有一个一键三连哦,哈哈😁

在这里插入图片描述



成果展示

image-20211009165346322

出于测试爬了5页

image-20211009165403878

image-20211009165418335

image-20211009165426800

效果不用我多说了吧,这部爽歪歪,既学知识又有高清壁纸,哈哈

美女真是养眼,哈哈🤣

image-20211009165437389

image-20211009165503392

【版权声明】本文为华为云社区用户原创内容,未经允许不得转载,如需转载请自行联系原作者进行授权。如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@huaweicloud.com
  • 点赞
  • 收藏
  • 关注作者

评论(0

0/1000
抱歉,系统识别当前为高风险访问,暂不支持该操作

全部回复

上滑加载中

设置昵称

在此一键设置昵称,即可参与社区互动!

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。