@Author：Runsen

三十一、Scrapy爬取百度图片

上文用了scrapy爬取了百度的美女图片，今天写写scrapy中的Image Pipeline。

scrapy提供了很多中间组件可以让我们更加自定义想要的效果，比如项目管道item pipeline，下载中间件downloader middleware，蜘蛛中间件spider middleware等。通过更改或者添加的方式我们可以实现很多的功能。这种中间组件就像钩子一样，在完成结果之前，修改部分内容来使结果不一样。

先来说说scrapy中的Image Pipeline，Scrapy内置了图片管道，可以帮助你轻松下载图片到本地

ImagesPipeline的操作

scrapy提供了专门下载的PIpeline，包含文件下载和图片下载。

在pipelines.py 导入ImagesPipeline

from scrapy.

文章来源: maoli.blog.csdn.net，作者：刘润森！，版权归原作者所有，如需转载，请联系作者。

原文链接：maoli.blog.csdn.net/article/details/88622008