使用pycharm运行调试scrapy

Posted sjfgod

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了使用pycharm运行调试scrapy相关的知识,希望对你有一定的参考价值。

摘要 Scrapy是爬虫抓取框架,Pycharm是强大的python的IDE,为了方便使用需要在PyCharm对scrapy程序进行调试 python PyCharm Scrapy 


scrapy指令其实就是一个python的运行脚本

pyCharm是一个强大的pythonIDE

在运行scrapy库时,其实是相当于运行一个python脚本:

#!/usr/bin/python

from scrapy.cmdline import execute

execute()

所以当运行scrapy crawler spider时,其实与指令:

  python /Library/Python/2.7/site-packages/scrapy/cmdline.py crawl spider

的效果是一样的

这样只需要在pycharm中的Run下Edit Configurations...中做运行配置即可:

 

 

Name

可以随便填

点击ok后,在你的项目中设置断点或者直接运行,即可调试该项目了

个人配置实例:

 转载: http://www.07net01.com/2015/08/904875.html

以上是关于使用pycharm运行调试scrapy的主要内容,如果未能解决你的问题,请参考以下文章

如何使用 PyCharm 调试 Scrapy 项目

scrapy按顺序启动多个爬虫代码片段(python3)

PyCharm调试运行Scrapy教程

pycharm下运行和调试scrapy项目

Scrapy在PyCharm里面运行,调试

scrapy主动退出爬虫的代码片段(python3)