利用pyCharm创建scrapy项目

Posted gaota1996

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了利用pyCharm创建scrapy项目相关的知识,希望对你有一定的参考价值。

最近在自学爬虫,一开始以为scrapy项目可以手动创建的,后来百度发现要想在pyCharm中创建scrapy项目,要在Terminal终端上写命令行。

1.先找到Terminal终端

技术分享图片

2.在终端输入 :scrapy startproject mySpider 

技术分享图片

列表中出现

技术分享图片

mySpider/ :项目的Python模块,将会从这里引用代码

__init__.py:这个必须有,虽然文件里没有内容

mySpider/items.py :项目的目标文件(存储数据的)

mySpider/pipelines.py :项目的管道文件

mySpider/settings.py :项目的设置文件

mySpider/spiders/ :存储爬虫代码目录

以上是关于利用pyCharm创建scrapy项目的主要内容,如果未能解决你的问题,请参考以下文章

scrapy工程创建及pycharm运行

使用 PyCharm 运行 scrapy - 调试有效,但运行无效

Scrapy 创建项目 (未完)

创建scrapy项目失败怎么办?

scrapy--Pycharm创建scrapy项目

4.python爬虫之新建 scrapy 爬虫项目(抓取和保存)