爬虫日记(73):Scrapy程序运行入口点分析

Posted caimouse

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了爬虫日记(73):Scrapy程序运行入口点分析相关的知识,希望对你有一定的参考价值。

前面分析了怎么样产生scrapy.exe程序,然后通过它就会调用下一个模块,就是cmdline.py文件,它是位于目录scrapy里面,如下图:

我们可以通过修改这个文件来验证一下是否最开始调用这个文件运行,找到execute函数的位置,添加下面的代码:

然后我们到终端窗口里运行爬虫的命令:

scrapy crawl quotes

这时就可以看到输出如下:

以上是关于爬虫日记(73):Scrapy程序运行入口点分析的主要内容,如果未能解决你的问题,请参考以下文章

爬虫日记(74):Scrapy项目配置参数源码分析

爬虫日记(78):Scrapy的命令运行入口点

爬虫日记(88):Scrapy的Downloader类

爬虫日记(64):Scrapy的设置参数-统计分析

爬虫日记(76):Scrapy的命令行源码分析

爬虫日记(76):Scrapy的命令行源码分析二