pycharm下运行和调试scrapy项目

Posted vevy

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了pycharm下运行和调试scrapy项目相关的知识,希望对你有一定的参考价值。

 

1. 新建项目

默认在本地已经新建了一个scrapy爬虫项目

技术分享图片

2. 打开项目

点击open à 选择刚刚那个本地的scrapy项目meijutt100

3. 项目结构

各个py文件的作用不作介绍,不懂的请看入门教程

技术分享图片

4. 创建启动脚本

在第二个meijutt100和scrapy.cfg同级目录下,新建一个文件,如begin.py(名字随便)用于模拟命令行启动scrapy项目

技术分享图片

5. 配置pycharm

点击Run --> Edit Configurations

技术分享图片

点击 + 号,选择python

技术分享图片

 继续配置

技术分享图片

第一步:给自己的启动配置起个名字,

第二步:选择启动脚本,就是刚刚创建的begin.py,

第三步:选择默认的python运行环境,这里最好用系统自己装的,不要用pycharm自带的,不然会出现很多多余的文件夹

第四步:选择工作空间,一般默认为当前项目目录

6. 运行和调试

技术分享图片

点击运行或者debug调试该项目,可以在代码中打断点调试。

 

初学srapy,有错误之处还望各位读者指出。附上项目源码:https://github.com/weiliangchun/scrapy-meiju100.git

以上是关于pycharm下运行和调试scrapy项目的主要内容,如果未能解决你的问题,请参考以下文章

亲测——pycharm下运行第一个scrapy项目 ©seven_clear

如何使用 PyCharm 调试 Scrapy 项目

Scrapy在PyCharm里面运行,调试

pycharm下打开执行并调试scrapy爬虫程序

4.python爬虫之新建 scrapy 爬虫项目(抓取和保存)

使用pycharm运行调试scrapy