新建scrapy项目

Posted 神秘藏宝室

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了新建scrapy项目相关的知识,希望对你有一定的参考价值。

在需要新建项目的目录下发指令

scrapy startproject SpiderObject

其中SpiderObject为工程的名字,会新建一个文件夹

新建一个爬虫

scrapy genspider test "www.baidu.com"

test是爬虫名字
网址是允许爬取的网站,不需要带HTTP://

以上是关于新建scrapy项目的主要内容,如果未能解决你的问题,请参考以下文章

1.1Scrapy抓取4步走新建项目

新建scrapy项目

Python 手动新建 Scrapy项目

scrapy按顺序启动多个爬虫代码片段(python3)

scrapy01-scrapy的项目的创建和启动

Scrapy 基础-01