python文件操作

Posted 2020-11-16 南哥的天下

工作中遇到的问题：如何在多线程的程序中同时记录日志？

最初图省事，使用了最原始的open函数来写日志，因为开始使用的写文件模式的是追加(‘a‘），发现并没有线程不安全的现象，各个线程的的日志信息都写入到了日志文件中。

后来将写文件模式改成了只写默认(‘w‘)，这时候线程不安全的问题就显露出来了，只有一个线程的日志信息被记录。

这时候觉得不能再图省事了，有必要把Python标准库中专用日志模块logging好好学习一下，果然不让人失望，logging是线程安全的。无论是只写模式，还是追加模式，多线程的日志信息都正确的被记录下来了。

以下是测试代码：

def file_io(message,mode):
    with open(‘log_test.log‘,mode) as f:
        f.write(message)
        f.write(‘
‘)


def logging_io(message,mode):
    logging.basicConfig(level=‘DEBUG‘,
                        filename=‘log_test1.log‘,
                        filemode=mode)
    logging.info(message)


if __name__ == ‘__main__‘:
    messages= [‘---hello--‘, ‘----nihaojlj‘, ‘----world%%%%%%%%%%%%%%%%%%‘]
    for m in messages:
        th = threading.Thread(target=logging_io, args=(m,‘a‘))
        th.start()

总结：

1. 多线程同时写文件的时候，追加模式(‘a‘)貌似并没有线程不安全的现象
2. 多线程记录日志信息，还是使用标准库的logging模块吧，它线程安全！专业的事用专业的模块！