?

線上某些系統業務跑一段時間后，日志就會越來越多，考慮到業務機器磁盤有限，需要添加業務日志清理功能。根據日志所在分區磁盤使用情況來判斷是否清理日志，比如當日志分區磁盤空間使用超過90%時，將一周前的日志打包轉移到別處 (別的分區下或遠程存儲設備上)。腳本 (/opt/script/log_clear.sh) 如下:

#!/bin/bash#定義日志所在分區當前空間所占比例數(去掉%)。grep -w表示精準匹配，只匹配"/"這個分區 LOG_PARTITION=$(`which df` -h|awk '{print $5,$6}'|grep -w "/"|cut -d" " -f1|awk -F"%" '{print $1}') #定義一周前的日期，用于日志分區空間超過設定的閾值后保留的份數(這里保留一周的日志) KEEP_DATE=`date -d '-7 days' +%Y%m%d` #定義日志路徑 LOG_DIR=/opt/log/kevin #定義日志備份路徑(即當日志分區空間超過閾值后，將日志轉移到該處。這里就轉移到了本地home分區下，也可以轉移到別的機器或遠程存儲設備上) LOG_BACK_DIR=/home/log/kevin#確保日志備份路徑存在，如果不存在，則創建該路徑。 if [ ! -d ${LOG_BACK_DIR} ];then`which mkdir` -p ${LOG_BACK_DIR} elseecho "${LOG_BACK_DIR} is exist" >/dev/null 2>&1 fi#當日志分區當前空間超過90%時執行的動作 if [ ${LOG_PARTITION} -ge 90 ];then#切換到日志路徑下cd ${LOG_DIR}#截取日志文件中的日期，比如stepweb_20190915.log日志文件，則截取20190915for LOG_DATE in $(ls -l ${LOG_DIR}|awk '{print $9}'|cut -d"_" -f2|awk -F"." '{print $1}')do#當日志文件中截取的日期是一周之前的日志時執行的動作if [ ${LOG_DATE} -lt ${KEEP_DATE} ];then#打包，轉移，刪除#注意這里tar使用-P參數，因為tar默認為相對路徑，使用絕對路徑的話會報錯"Removing leading `/’ from member names",使用-P參數就解決了該問題`which tar` -zvPcf ${LOG_DIR}/stepweb_${LOG_DATE}.log.tar.gz ${LOG_DIR}/stepweb_${LOG_DATE}.logmv ${LOG_DIR}/stepweb_${LOG_DATE}.log.tar.gz ${LOG_BACK_DIR}/rm -rf ${LOG_DIR}/stepweb_${LOG_DATE}.logelseecho "keep stepweb_${LOG_DATE}.log" >/dev/null 2>&1fidone elseecho "${LOG_PARTITION} is available" >/dev/null 2>&1 fi

根據上面腳本驗證下：

查看本機磁盤使用情況，日志所在分區磁盤當前使用率達到92%了 [root@yyweb kevin]# df -h Filesystem Size Used Avail Use% Mounted on /dev/mapper/centos-root 50G 46G 4G 92% / devtmpfs 3.9G 0 3.9G 0% /dev tmpfs 3.9G 0 3.9G 0% /dev/shm tmpfs 3.9G 34M 3.8G 1% /run tmpfs 3.9G 0 3.9G 0% /sys/fs/cgroup /dev/sda1 1014M 183M 832M 19% /boot /dev/mapper/centos-home 142G 33M 142G 1% /home日志所在路徑 [root@yyweb kevin]# pwd /opt/log/kevin日志情況 [root@yyweb kevin]# ls stepweb_20190810.log stepweb_20190817.log stepweb_20190824.log stepweb_20190901.log stepweb_20190908.log stepweb_20190915.log stepweb_20190811.log stepweb_20190818.log stepweb_20190825.log stepweb_20190902.log stepweb_20190909.log stepweb_20190916.log stepweb_20190812.log stepweb_20190819.log stepweb_20190826.log stepweb_20190903.log stepweb_20190910.log stepweb_20190917.log stepweb_20190813.log stepweb_20190820.log stepweb_20190827.log stepweb_20190904.log stepweb_20190911.log stepweb_20190918.log stepweb_20190814.log stepweb_20190821.log stepweb_20190828.log stepweb_20190905.log stepweb_20190912.log stepweb_20190919.log stepweb_20190815.log stepweb_20190822.log stepweb_20190829.log stepweb_20190906.log stepweb_20190913.log stepweb_20190816.log stepweb_20190823.log stepweb_20190830.log stepweb_20190907.log stepweb_20190914.log[root@yyweb kevin]# ls /home/ [root@yyweb kevin]# 執行日志清理腳本 [root@yyweb kevin]# sh /opt/script/log_clear.sh /opt/log/kevin/stepweb_20190810.log /opt/log/kevin/stepweb_20190811.log /opt/log/kevin/stepweb_20190812.log /opt/log/kevin/stepweb_20190813.log /opt/log/kevin/stepweb_20190814.log /opt/log/kevin/stepweb_20190815.log /opt/log/kevin/stepweb_20190816.log /opt/log/kevin/stepweb_20190817.log /opt/log/kevin/stepweb_20190818.log /opt/log/kevin/stepweb_20190819.log /opt/log/kevin/stepweb_20190820.log /opt/log/kevin/stepweb_20190821.log /opt/log/kevin/stepweb_20190822.log /opt/log/kevin/stepweb_20190823.log /opt/log/kevin/stepweb_20190824.log /opt/log/kevin/stepweb_20190825.log /opt/log/kevin/stepweb_20190826.log /opt/log/kevin/stepweb_20190827.log /opt/log/kevin/stepweb_20190828.log /opt/log/kevin/stepweb_20190829.log /opt/log/kevin/stepweb_20190830.log /opt/log/kevin/stepweb_20190901.log /opt/log/kevin/stepweb_20190902.log /opt/log/kevin/stepweb_20190903.log /opt/log/kevin/stepweb_20190904.log /opt/log/kevin/stepweb_20190905.log /opt/log/kevin/stepweb_20190906.log /opt/log/kevin/stepweb_20190907.log /opt/log/kevin/stepweb_20190908.log /opt/log/kevin/stepweb_20190909.log /opt/log/kevin/stepweb_20190910.log /opt/log/kevin/stepweb_20190911.log /opt/log/kevin/stepweb_20190912.log日志清理后，日志路徑下只保留了最近一周的日志 [root@yyweb kevin]# ls stepweb_20190913.log stepweb_20190915.log stepweb_20190917.log stepweb_20190919.log stepweb_20190914.log stepweb_20190916.log stepweb_20190918.log一周之前的日志被打包轉移到/home/log/kevin下了 [root@yyweb kevin]# ls /home/log/kevin/ stepweb_20190810.log.tar.gz stepweb_20190817.log.tar.gz stepweb_20190824.log.tar.gz stepweb_20190901.log.tar.gz stepweb_20190908.log.tar.gz stepweb_20190811.log.tar.gz stepweb_20190818.log.tar.gz stepweb_20190825.log.tar.gz stepweb_20190902.log.tar.gz stepweb_20190909.log.tar.gz stepweb_20190812.log.tar.gz stepweb_20190819.log.tar.gz stepweb_20190826.log.tar.gz stepweb_20190903.log.tar.gz stepweb_20190910.log.tar.gz stepweb_20190813.log.tar.gz stepweb_20190820.log.tar.gz stepweb_20190827.log.tar.gz stepweb_20190904.log.tar.gz stepweb_20190911.log.tar.gz stepweb_20190814.log.tar.gz stepweb_20190821.log.tar.gz stepweb_20190828.log.tar.gz stepweb_20190905.log.tar.gz stepweb_20190912.log.tar.gz stepweb_20190815.log.tar.gz stepweb_20190822.log.tar.gz stepweb_20190829.log.tar.gz stepweb_20190906.log.tar.gz stepweb_20190816.log.tar.gz stepweb_20190823.log.tar.gz stepweb_20190830.log.tar.gz stepweb_20190907.log.tar.gz

? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ??
再貼一個簡單的日志處理腳本

#!/usr/bin/sh #根據系統/服務/日志保留天數三個參數壓縮日志 #usage: sh clearlog.sh sysname appname keepdays sysName=$1 appName=$2 keepDay=$3 logDir=/var/log/${sysName}/${appName} logFile=${appName}.log cd ${logDir} find ./ -name "${logFile}.*[0-9][0-9]" -mtime +${keepDay} -exec gzip {} \;

轉載于:https://www.cnblogs.com/kevingrace/p/11556219.html

總結

以上是生活随笔為你收集整理的运维记录 - 业务日志清理功能的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。