scrapy 配置文件指定如何导出数据

Posted mahailuo

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了scrapy 配置文件指定如何导出数据相关的知识,希望对你有一定的参考价值。

1.导出文件路径

FEED_URI = ‘export_data/%(name)s.data‘

2.导出数据格式

FEED_FORMAT = ‘csv‘

3.导出文件编码

FEED_EXPORT_ENCODING = ‘gbk‘

4.导出数据包含的字段(默认情况下导出所有字段),并指定次序

FEED_EXPORT_FIELDS = [‘f1‘, ‘f2‘, ‘f3‘]

以上是关于scrapy 配置文件指定如何导出数据的主要内容,如果未能解决你的问题,请参考以下文章

如何将 Laravel 数据表里的数据导出成 Seeder 文件

爬虫框架 Scrapy 使用

转载Python爬虫框架Scrapy学习笔记

Scrapy-拓展类和settings.py配置文件

scrapy导出文件中文乱码问题

plsql还原dump可执行文件如何配置