Python多进程写日志ConcurrentLogHandler

Posted 2022-12-03 MissZhou要努力

文档：

https://pypi.org/project/ConcurrentLogHandler/0.9.1/

这个类库是通过文件锁实现写日志进程安全的，但是只能通过文件大小控制切割，不能通过时间分割文件。

demo：

import time
import logging, logging.config
from cloghandler import ConcurrentRotatingFileHandler
from multiprocessing import Process
 
 
def main(input):
    logging.config.fileConfig("logging.ini")
    log = logging.getLogger()
    for i in range(50):
        log.info(f'process: [input], print: [i]')
        time.sleep(1)
 
 
if __name__ == '__main__':
    process_list = []
    for i in range(5):
        p = Process(target=main, args=(i,))
        p.start()

[loggers]
keys=root
 
[handlers]
keys=hand01
 
[formatters]
keys=form01
 
[logger_root]
level=NOTSET
handlers=hand01
 
[handler_hand01]
class=handlers.ConcurrentRotatingFileHandler
level=NOTSET
formatter=form01
args=("rotating.log", "a", 512, 500)
 
[formatter_form01]
format=%(asctime)s %(levelname)s %(message)s

其中

args第一个参数日志文件前缀，第二个参数是以xxx字节大小分割文件，第三个参数是最多保留文件个数

按着这个配置，就会生成25个日志文件，每个文件10行日志。