Scrapy的debug方式

Posted 2020-09-21 李雷雷

Scrapy不方便调试，但是为了深入学习框架内部的一些原理，有时候仅仅依靠日志是不够的。下面提供一种scrapy的debug方式

demo直接用来自官方例子来演示：https://github.com/scrapy/quotesbot

 

在运行 scrapy 库时，其实是相当于运行一个 python 脚本：

#!/usr/bin/python

from scrapy.cmdline import execute
execute()

所以，我们将上面的代码保存为一个 debug.py 的文件在 scrapy 项目目录下

 

接着配置调试器，如下

接下来，直接在debug.py中就可以以此为入口调试了