@Author：Runsen

上次 用scrapy爬了腾讯招聘网站，有两个job.json 和detail.json，针对一个item，其实有更简单的处理方法。

今天讲讲scrapy 中的杂知识，做一个系统的总结

保存信息

crapy保存信息的最简单的方法主要有四种，-o 输出指定格式的文件，命令如下：

• 默认json

scrapy crawl name -o 、spider.json

• json lines格式，默认为Unicode编码

scrapy crawl name -o spider..jl

• csv 逗号表达式，可用Excel打开

scrapy crawl name -o spider..csv

• xml格式

scrapy crawl name -o spider..xml

但是保存的编码不对，必须在settings中加入
FEED_EXPORT_EN

文章来源: maoli.blog.csdn.net，作者：刘润森！，版权归原作者所有，如需转载，请联系作者。

原文链接：maoli.blog.csdn.net/article/details/89007594