爬虫日记(83):Scrapy的CrawlerProcess类(四)

Posted caimouse

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了爬虫日记(83):Scrapy的CrawlerProcess类(四)相关的知识,希望对你有一定的参考价值。

当前面准备工作都已经做之后,我们就需要让爬虫转换控制权了,就是从命令里转移到引擎运行了,它的触发代码就是在下面:

class Command(BaseRunSpiderCommand):

    ...

    def run(self, args, opts):

        ...

        self.crawler_process.start()

        ...

这行代码self.crawler_process.start()是调用crawler_process对象,也就是CrawlerProcess类,函数就是对应的start()函数,这个函数定义如下:

以上是关于爬虫日记(83):Scrapy的CrawlerProcess类(四)的主要内容,如果未能解决你的问题,请参考以下文章

爬虫日记(83):Scrapy的CrawlerProcess类(三)

爬虫日记(83):Scrapy的CrawlerProcess类(二)

爬虫日记(63):Scrapy的设置参数-日志

爬虫日记(73):Scrapy程序运行入口点分析

爬虫日记(75):Scrapy的Settings源码分析

爬虫日记(74):Scrapy项目配置参数源码分析(二)