四十四、Scrapy爬取梨视频官网的视频并实现部署
【摘要】 @Author:Runsen
在之前的文章二十二、爬取梨视频官网的视频实现了对梨视频官网的视频的爬取。下面,我们通过Scrapy爬取梨视频官网,并通过Scrapyd实现部署。
文章目录
创建项目
item.py
Pear_spider.py
Pipeline.py
部署
创建项目
创建Scrapy的项目这里不再重复...
@Author:Runsen
在之前的文章二十二、爬取梨视频官网的视频实现了对梨视频官网的视频的爬取。下面,我们通过Scrapy爬取梨视频官网,并通过Scrapyd实现部署。
创建项目
创建Scrapy的项目这里不再重复。不要觉得很难,其实它真的非常简单,就是做填空题而已。
新建的项目目录如下。
item.py
因为,我们要爬取小视频的网址和名称。所以定义了两个字段。
import scrapy
class PearVideoItem(scrapy.Item):
- 1
- 2
- 3
- 4
文章来源: maoli.blog.csdn.net,作者:刘润森!,版权归原作者所有,如需转载,请联系作者。
原文链接:maoli.blog.csdn.net/article/details/107769261
【版权声明】本文为华为云社区用户转载文章,如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱:
cloudbbs@huaweicloud.com
- 点赞
- 收藏
- 关注作者
评论(0)