Python网络爬虫_Scrapy框架_2.logging模块的使用

Posted 好好学习,天天向上

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Python网络爬虫_Scrapy框架_2.logging模块的使用相关的知识,希望对你有一定的参考价值。

logging模块提供日志服务

在scrapy框架中已经对其进行一些操作所以使用更为简单

 

在Scrapy框架中使用:

1.在setting.py文件中设置LOG_LEVEL(设置日志等级,只有高于等于本等级的日志会显示)

LOG_FILE(设置日志保存位置,设定后不会在终端显示日志)

2.实例化logger(getLogger方法可以显示__name__也就是文件名)

logger.warning("消息"): 以waring等级输出日志消息

 

在普通文件中使用:

该代码只显示消息 HDU, 没有其他日志信息

在普通文件中使用logging需要自定义日志格式

logging模块详细学习:https://blog.csdn.net/zyz511919766/article/details/25136485

以上是关于Python网络爬虫_Scrapy框架_2.logging模块的使用的主要内容,如果未能解决你的问题,请参考以下文章

爬虫框架_scrapy1

Python_Scarapy_01_Scrapy架构流程介绍

python 爬虫相关含Scrapy框架

python——Scrapy 框架

Python3 爬虫05_安装Scrapy

Python爬虫_Scrapy