爬虫Scrapy指令学习

Posted qq52117354

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了爬虫Scrapy指令学习相关的知识,希望对你有一定的参考价值。

1、新建一个新的爬虫项目指令 scrapy startproject xxx

2、在项目/spider目录下创建一个名为XXX的爬虫,并指定爬取域的范围  scrapy genspider XXX "www.XXX.com"

3、执行运行命令 scrapy crawl itcast

4、保存execl数据 scrapy crawl XXX -o XXX.csv

5、保存json数据 scrapy crawl XXX -o XXX.json

以上是关于爬虫Scrapy指令学习的主要内容,如果未能解决你的问题,请参考以下文章

Scrapy框架学习第二天

python爬虫--scrapy框架的学习和使用⭐⭐⭐---第一部分

Scrapy框架学习笔记:猫眼爬虫

Scrapy学习-

爬虫--Scrapy框架的基本使用

Scrapy基于终端指令的持久化存储