创建Scrapy项目,创建spider,运行Scrapy

Posted lb809663396

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了创建Scrapy项目,创建spider,运行Scrapy相关的知识,希望对你有一定的参考价值。

先安装Scrapy

打开运行cmd

进入到你想存放 Scrapy 项目的地方 执行 scrapy startproject xxx (xxx 是你的项目名字)

技术图片

 CD到scrapy根目录下执行:

技术图片

 

以上是关于创建Scrapy项目,创建spider,运行Scrapy的主要内容,如果未能解决你的问题,请参考以下文章

怎么使用python脚本运行多个scrapy爬虫

怎么使用python脚本运行多个scrapy爬虫

spider-通过scrapyd网页管理工具执行scrapy框架

17 Scrapy内置爬虫CrawlSpider和Spider的差异、使用正则分析链接

Spider-scrapy断点续爬

Scrapy在PyCharm里面运行,调试