Docker容器日志占用空間過大問題及解決
Docker容器日志占用空間過大問題
問題
docker容器日志導(dǎo)致主機(jī)磁盤空間滿了。
docker logs -f container_name噼里啪啦一大堆,很占用空間,不用的日志可以清理掉了。
解決方法
找出Docker容器日志
在linux上,容器日志一般存放在/var/lib/docker/containers/container_id/下面,查看各個(gè)日志文件大小的腳本docker_log_size.sh,內(nèi)容如下:
#!/bin/sh? echo "======== docker containers logs file size ========" ? logs=$(find /var/lib/docker/containers/ -name *-json.log) ? for log in $logs ? ? ? ? ? do ? ? ? ? ? ? ? ?ls -lh $log ?? ? ? ? ? done
# chmod +x docker_log_size.sh # ./docker_log_size.sh
清理Docker容器日志(治標(biāo))
如果docker容器正在運(yùn)行,那么使用rm -rf方式刪除日志后,通過df -h會(huì)發(fā)現(xiàn)磁盤空間并沒有釋放。
原因是在Linux或者Unix系統(tǒng)中,通過rm -rf或者文件管理器刪除文件,將會(huì)從文件系統(tǒng)的目錄結(jié)構(gòu)上解除鏈接(unlink)。
如果文件是被打開的(有一個(gè)進(jìn)程正在使用),那么進(jìn)程將仍然可以讀取該文件,磁盤空間也一直被占用。正確姿勢是cat /dev/null > *-json.log,當(dāng)然你也可以通過rm -rf刪除后重啟docker。
接下來,提供一個(gè)日志清理腳本clean_docker_log.sh,內(nèi)容如下:
#!/bin/sh? echo "======== start clean docker containers logs ========" ? logs=$(find /var/lib/docker/containers/ -name *-json.log) ? for log in $logs ? ? ? ? ? do ? ? ? ? ? ? ? ? ? echo "clean logs : $log" ? ? ? ? ? ? ? ? ? cat /dev/null > $log ? ? ? ? ? done ? echo "======== end clean docker containers logs ========" # chmod +x clean_docker_log.sh # ./clean_docker_log.sh
但是,這樣清理之后,隨著時(shí)間的推移,容器日志會(huì)像雜草一樣,卷土重來。
設(shè)置Docker容器日志大?。ㄖ伪荆?/strong>
設(shè)置一個(gè)容器服務(wù)的日志大小上限
上述方法,日志文件遲早又會(huì)漲回來。
要從根本上解決問題,需要限制容器服務(wù)的日志大小上限。
這個(gè)通過配置容器docker-compose的max-size選項(xiàng)來實(shí)現(xiàn)
nginx:? ? image: nginx:1.12.1? ? restart: always? ? logging:? ? ? driver: “json-file”? ? ? options:? ? ? ? max-size: “5g”?
重啟nginx容器之后,其日志文件的大小就被限制在5GB,再也不用擔(dān)心了。
全局設(shè)置
新建/etc/docker/daemon.json,若有就不用新建了。添加log-dirver和log-opts參數(shù),樣例如下:
# vim /etc/docker/daemon.json { ? "log-driver":"json-file", ? "log-opts": {"max-size":"500m", "max-file":"3"} }
max-size=500m
,意味著一個(gè)容器日志大小上限是500M,max-file=3
,意味著一個(gè)容器有三個(gè)日志,分別是id+.json、id+1.json、id+2.json。
// 重啟docker守護(hù)進(jìn)程 # systemctl daemon-reload # systemctl restart docker
注意:設(shè)置的日志大小,只對新建的容器有效。
Docker容器日志清理
問題:
docker容器長時(shí)間運(yùn)行,若程序有大量的打印,日志會(huì)不斷增大,導(dǎo)致主機(jī)磁盤空間滿。
根治docker容器的方法:限制容器日志文件的大小,文件的數(shù)量。
通過配置max-log限制日志文件的大小,max-file參數(shù)限制日志文件的數(shù)量
使用docker-compose.yml文件部署,針對單一容器進(jìn)行限制
docker-rate: ? ? image: python:3.9.5 ? ? container_name:docker-rate ? ? restart: always ? ? logging: ? ? ? options: ? ? ? ? max-size: "5g" ? ? ? ? max-file: "1" ? ? volumes: ? ? ?- /var/share:/share ? ? command: bash -c "python /share/run.py" ? ? environment: ? ? ? VERSION: 1
修改docker配置文件,全局生效
vim /etc/docker/daemon.json { ? "log-opts": {"max-size": "500m", "max-file": "3"} }
總結(jié)
以上為個(gè)人經(jīng)驗(yàn),希望能給大家一個(gè)參考,也希望大家多多支持腳本之家。
相關(guān)文章
docker部署fastapi的實(shí)現(xiàn)步驟
本文主要介紹了docker部署fastapi的實(shí)現(xiàn)步驟,文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2023-03-03使用Docker-compose離線部署Django應(yīng)用的方法
這篇文章主要介紹了使用Docker-compose離線部署Django應(yīng)用的方法,小編覺得挺不錯(cuò)的,現(xiàn)在分享給大家,也給大家做個(gè)參考。一起跟隨小編過來看看吧2019-03-03使用Docker配置redis sentinel哨兵的方法步驟
本文主要介紹了Docker配置redis sentinel哨兵的方法步驟,文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2022-07-07Docker教程之dockerfile構(gòu)建centos鏡像
這篇文章主要介紹了Docker教程之dockerfile構(gòu)建centos鏡像的相關(guān)資料,需要的朋友可以參考下2022-11-11