Python爬虫入门教程 89-100 定个小目标,先用Python爬个一亿B站用户

举报
梦想橡皮擦 发表于 2021/05/28 04:45:27 2021/05/28
【摘要】 梦想橡皮擦:2020年B站知名度越来越高,用户数量越来越多,作为一个爬虫爱好者,爬取一些用户信息过来做测试,美滋滋~ 声明一下,用户在我电脑存储2个小时就删除了,只供学习使用。 定个小目标,先用Python爬个一亿B站用户目录 写在前面 编码时间 sqlite3简单使用 多线程爬取B站用户 写在后面 广宣时间 ...

梦想橡皮擦:2020年B站知名度越来越高,用户数量越来越多,作为一个爬虫爱好者,爬取一些用户信息过来做测试,美滋滋~ 声明一下,用户在我电脑存储2个小时就删除了,只供学习使用。

定个小目标,先用Python爬个一亿B站用户目录

写在前面

今天这篇博客单纯练习爬虫的点不多,就是requests抓取数据,顺带增加一个切换IP的操作,对于我们坚持到现在的学习者来说,非常简单,不过本篇博客,顺带着练习使用一下sqlite3数据存储。

思路的来源依旧是Web爬取不了就爬取移动端网页,B站的个人中心页在手机端打开如下图所示

文章来源: dream.blog.csdn.net,作者:梦想橡皮擦,版权归原作者所有,如需转载,请联系作者。

原文链接:dream.blog.csdn.net/article/details/108513271

【版权声明】本文为华为云社区用户转载文章,如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@huaweicloud.com
  • 点赞
  • 收藏
  • 关注作者

评论(0

0/1000
抱歉,系统识别当前为高风险访问,暂不支持该操作

全部回复

上滑加载中

设置昵称

在此一键设置昵称,即可参与社区互动!

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。