Python3 - Docker 容器日志清理方案

Posted 2022-11-17 韩俊强

文章目录

• • 1. 查看容器日志位置
  • 2. 清理正在运行的容器日志（不推荐）
  • 3. 设置Docker容器日志大小(推荐1)
  • • 3.1 设置一个容器服务的日志大小上限
    • 3.2 全局设置
  • 4. docker-compose(推荐2)

Docker容器中常常会存放各种日志， 长期下来会占用不小的空间，那么如何清理docker日志呢？
我们有几种方案：
第一种是临时清理，可以找到日志位置，直接删除日志文件；
第二种是定期维护，使用脚本根据阈值执行脚本删除；
第三种是启动容器前设定好日志大小，日志个数，启动容器后按照规则去处理；
本篇博文推荐第三种，因为此方案比较稳妥安全可靠。

1. 查看容器日志位置

在linux上，容器日志一般存放在/var/lib/docker/containers/container_id/下面， 以json.log结尾的文件（业务日志）很大，查看各个日志文件大小的脚本内容如下：

#!/bin/sh

echo "======== docker containers logs file size ========"  

logs=$(find /var/lib/docker/containers/ -name *-json.log)  

for log in $logs  
        do  
             ls -lh $log   
        done  

注意：切不可直接删除此文件，删除日志文件会导致Docker工作异常

2. 清理正在运行的容器日志（不推荐）

如果docker容器正在运行，那么使用rm -rf方式删除日志后，通过df -h会发现磁盘空间并没有释放。原因是在Linux或者Unix系统中，通过rm -rf或者文件管理器删除文件，将会从文件系统的目录结构上解除链接（unlink）。如果文件是被打开的（有一个进程正在使用），那么进程将仍然可以读取该文件，磁盘空间也一直被占用。正确姿势是cat /dev/null > *-json.log，当然你也可以通过rm -rf删除后重启docker。接下来，提供一个日志清理脚本内容如下：

#!/bin/sh 

echo "======== start clean docker containers logs ========"  

logs=$(find /var/lib/docker/containers/ -name *-json.log)  

for log in $logs  
        do  
                echo "clean logs : $log"  
                cat /dev/null > $log  
        done  

echo "======== end clean docker containers logs ========"  

但是，这样清理之后，随着时间的推移，容器日志会像杂草一样，卷土重来。

3. 设置Docker容器日志大小(推荐1)

3.1 设置一个容器服务的日志大小上限

在启动容器的时候增加一个参数设置该容器的日志大小，及日志驱动

--log-driver json-file  #日志驱动
--log-opt max-size=[0-9+][k|m|g] #文件的大小
--log-opt max-file=[0-9+] #文件数量

3.2 全局设置

编辑文件/etc/docker/daemon.json, 增加以下日志的配置

"log-driver":"json-file",
"log-opts": "max-size":"100m", "max-file":"3"

max-size=100m，意味着一个容器日志大小上限是100M，
max-file=3，意味着一个容器有三个日志，分别是id+.json、id+1.json、id+2.json。

然后重启docker守护进程

// 重启docker守护进程

# systemctl daemon-reload

# systemctl restart docker

注意：设置的日志大小，只对新建的容器有效。

4. docker-compose(推荐2)

version: '3'
services:
  myapi:
    container_name: myapi
    environment:
      TZ: Asia/Shanghai
      PYTHONIOENCODING: utf-8
    logging:
      driver: "json-file"
      options:
        max-size: "100m"
        max-file: "3"

max-size=100m，意味着一个容器日志大小上限是100M，
max-file=3，意味着一个容器有三个日志，分别是id+.json、id+1.json、id+2.json。