Docker容器日志占用空间过大问题及解决

特别的自己

Docker容器日志占用空间过大问题


问题

docker容器日志导致主机磁盘空间满了。
docker logs -f container_name噼里啪啦一大堆，很占用空间，不用的日志可以清理掉了。

解决方法

找出Docker容器日志
在linux上，容器日志一般存放在/var/lib/docker/containers/container_id/下面，查看各个日志文件大小的脚本docker_log_size.sh，内容如下：

1. #!/bin/sh 
   
2. echo "======== docker containers logs file size ========"  
   
3. logs=$(find /var/lib/docker/containers/ -name *-json.log)  
   
4. for log in $logs  
   
5.         do  
   
6.              ls -lh $log   
   
7.         done

复制代码

1. # chmod +x docker_log_size.sh
   
2. # ./docker_log_size.sh

复制代码

清理Docker容器日志（治标）
如果docker容器正在运行，那么使用rm -rf方式删除日志后，通过df -h会发现磁盘空间并没有释放。
原因是在Linux或者Unix系统中，通过rm -rf或者文件管理器删除文件，将会从文件系统的目录结构上解除链接（unlink）。
如果文件是被打开的（有一个进程正在使用），那么进程将仍然可以读取该文件，磁盘空间也一直被占用。正确姿势是cat /dev/null > *-json.log，当然你也可以通过rm -rf删除后重启docker。
接下来，提供一个日志清理脚本clean_docker_log.sh，内容如下：

1. #!/bin/sh 
   
2. echo "======== start clean docker containers logs ========"  
   
3. logs=$(find /var/lib/docker/containers/ -name *-json.log)  
   
4. for log in $logs  
   
5.         do  
   
6.                 echo "clean logs : $log"  
   
7.                 cat /dev/null > $log  
   
8.         done  
   
9. echo "======== end clean docker containers logs ========"
   
10. # chmod +x clean_docker_log.sh
    
11. # ./clean_docker_log.sh

复制代码

但是，这样清理之后，随着时间的推移，容器日志会像杂草一样，卷土重来。
设置Docker容器日志大小（治本）
设置一个容器服务的日志大小上限
上述方法，日志文件迟早又会涨回来。
要从根本上解决问题，需要限制容器服务的日志大小上限。
这个通过配置容器docker-compose的max-size选项来实现

1. nginx: 
   
2.   image: nginx:1.12.1 
   
3.   restart: always 
   
4.   logging: 
   
5.     driver: “json-file” 
   
6.     options: 
   
7.       max-size: “5g” 

复制代码

重启nginx容器之后，其日志文件的大小就被限制在5GB，再也不用担心了。
全局设置
新建/etc/docker/daemon.json，若有就不用新建了。添加log-dirver和log-opts参数，样例如下：

1. # vim /etc/docker/daemon.json
   
2. {
   
3.   "log-driver":"json-file",
   
4.   "log-opts": {"max-size":"500m", "max-file":"3"}
   
5. }

复制代码

• 1. max-size=500m

  复制代码
  ，意味着一个容器日志大小上限是500M，
  
• 1. max-file=3

  复制代码
  ，意味着一个容器有三个日志，分别是id+.json、id+1.json、id+2.json。
  

1. // 重启docker守护进程
   
2. # systemctl daemon-reload
   
3. # systemctl restart docker

复制代码

注意：设置的日志大小，只对新建的容器有效。

Docker容器日志清理

问题：
docker容器长时间运行，若程序有大量的打印，日志会不断增大，导致主机磁盘空间满。
根治docker容器的方法：限制容器日志文件的大小，文件的数量。
通过配置max-log限制日志文件的大小，max-file参数限制日志文件的数量

使用docker-compose.yml文件部署，针对单一容器进行限制

1. docker-rate:
   
2.     image: python:3.9.5
   
3.     container_name:docker-rate
   
4.     restart: always
   
5.     logging:
   
6.       options:
   
7.         max-size: "5g"
   
8.         max-file: "1"
   
9.     volumes:
   
10.      - /var/share:/share
    
11.     command: bash -c "python /share/run.py"
    
12.     environment:
    
13.       VERSION: 1

复制代码

修改docker配置文件，全局生效

1. vim /etc/docker/daemon.json
   
2. {
   
3.   "log-opts": {"max-size": "500m", "max-file": "3"}
   
4. }

复制代码

总结

以上为个人经验，希望能给大家一个参考，也希望大家多多支持脚本之家。

来源:https://www.jb51.net/article/283973.htm
免责声明：由于采集信息均来自互联网，如果侵犯了您的权益，请联系我们【E-Mail:cb@itdo.tech】 我们会及时删除侵权内容，谢谢合作！